A l'origine, il s'agit d'une mise en dépôt du mobilier des fouilles archéologiques effectuées dans le canton de Châtillon-Coligny. Le musée réunit les tableaux et le mobilier des Montmorency-Luxembourg qui occupèrent le château de Châtillon-Luxembourg pendant près de trois siècles