Situé dans le château de Rochechouart, le musée s’est singularisé par un dialogue permanent entre la création contemporaine et un patrimoine historique.
Sur un promontoire rocheux, le château occupe un site remarquable dominant la vallée de la Graine et de la Vayres. Les bâtiments, pour l’essentiel, datent du XVe siècle avec la cour intérieure et son élégante galerie Renaissance. La partie la plus ancienne, comprenant le châtelet d’entrée et le donjon, remonte au XIIIe siècle.
Le département de la Haute-Vienne rachète en 1836 le château à la famille des Rochechouart. L’édifice a depuis fait l’objet de plusieurs campagnes de restauration et de réhabilitation. Depuis 1985, le château intègre le musée d’art contemporain.