นับตั้งแต่เชลซีผงาดขึ้นมาคว้าแชมป์พรีเมียร์ลีกได้สำเร็จในฤดูกาล 2004/05 พวกเค้าก็ดำรงสถานะเป็นทีมที่เน้นเกมรับอันแข็งแกร่งไว้ก่อน แล้วนั่นก็คือเหตุผลที่ทำให้บราติสลาฟ อิวาโนวิชถูกดึงตัวเข้ามายังถิ่นสแตนฟอร์ดบริดจ์ในปี 2007
อย่างไรก็ตามอิวาโนวิชไม่อาจทรอดแทรกตำแหน่งตัวจริงได้เลยในช่วงแรก และต้องรอกระทั่งฤดูกาล 2008/09 ถึงจะค่อยได้รับโอกาสลงเล่นกับเค้าบ้าง โดยนอกจากความแข็งแกร่งเหนียวแน่นในการเล่นเกมรับแล้ว อิวาโนวิชยังมีความยืดหยุ่นในการเล่นสูง เนื่องจากเค้าเล่นได้ทั้งในตำแหน่งกองหลังตัวกลางและฟูลแบ็คฝั่งขวา
ไม่นานอิวาโนวิชก็กลายเป็นกำลังสำคัญของเชลซีจนได้ เมื่อเค้าสามารถยิงประตูในยูนิฟอร์มสิงโตน้ำเงินครามสำเร็จจนได้ วันที่ 31 ตุลาคม 2009 อิวาโนวิชยิงหนึ่งประตูในเกมที่เชลซีบุกไปชนะโบลตัน 4-0 ซึ่งนั่นถือเป็นการยิงประตูแรกกับเชลซีของดาวเตะชาวเซอร์เบียอีกด้วย
อิวาโนวิชถือเป็นตัวหลักในเกมรับของเชลซีอยู่ถึง 9 ปี และได้ชูถ้วยรางวัลกับทีมมาอย่างโชกโชน อาทิ แชมป์พรีเมียร์ลีก 3 สมัย,เอฟเอคัพ 3 สมัย,ลีกคัพ 1 สมัย,ยูฟ่าแชมเปี้ยนลีก 1 สมัยและยูฟ่ายูโรเปี้ยนลีกอีก 1 สมัย นับรวมแล้วเค้าลงเล่นให้เชลซีไปทั้งหมด 377 นัดยิง 34 ประตูกับอีก 34 แอสซิสต์ ก่อนจะย้ายไปเล่นให้เซนิต เซนต์ ปีเตอร์เบิร์กในปี 2017