Le docteur Duret (1794-1874), maire de la ville, jette les bases du premier musée en créant en 1846 un cabinet d'archéologie et d'histoire naturelle. Le capitaine J. Derosne fonde le Musée des Chasseurs. Ce musée (rebaptisé musée Driant) rassemble armes et uniformes ainsi que des pièces en rapport avec la bataille de 1870. Cette collection s'est enrichie de tenues militaires de célèbres Nuitons. En 1971, dons de médailles et de monnaies. En 1975, le docteur Ernest Planson fonde le musée actuel en installant dans les caves de la Maison Rodier les collections gallo-romaines issues du site des Bolards.