Le Palais a été construit par ordre du Cardinal Joseph Fesch, oncle de Napoléon 1er. Son voeu était de créer un grand établissement comprenant un Institut des Etudes et une partie réservée à sa collection composée de plus de 17 000 oeuvres. Un millier de tableaux ont été légués à la ville d'Ajaccio : Ecoles italienne, française et flamande du XIVème au XVIIIème siècles. Une section napoléonienne occupe le rez-de-marine.