Depuis 1984, le château abrite des pavements médiévaux provenant des fondations d'une ancienne chapelle, mises au jour en 1975, en bordure même de la douve. A partir de 1986, le département du Morbihan a engagé une politique d'acquisition de collections en vue de la création du musée.