En 1849,
Xavier Branicki,
riche comte polonais émigré, ami de Napoléon III, entreprend la restauration complète du château, le remeuble et le décore de tableaux de maîtres.
Grand personnage du Second Empire, on lui doit entre autres la
fondation du Crédit Foncier.