Dressé sur un promontoire rocheux au confluent de la Vayres et de la Graine, le château des Vicomtes de Rochechouart est le reflet de la puissance de ses bâtisseurs. Les constructions ont débuté au XIIIème siècle avec le donjon et le pont-levis qui rappellent encore aujourd'hui les systèmes de défenses militaires de l'époque. Le château abrite actuellement le Musée Départemental d'Art contemporain. Il fut agrandi et embelli au cours des siècles par les familles qui l'occupèrent. Au XV ème siècle, c'est un corps de logis spacieux de style Renaissance, qui lui a porté toute son ornementation, ses façades élégantes et harmonieuses. La galerie à arcades et colonnes torses de la cour intérieure, date de cette période. Au 17ème, 18ème siècles, des bâtiments sont construits en équerre, au niveau de l'actuelle place de l'Hotel de Ville.
