En 1821, le domaine est acheté par Casimir-Pierre Perier (1777-1832), régent de la Banque de France, député, président de la Chambre, du Conseil et ministre de l'intérieur. Il conserve une partie des communs et fait construire, sa maison de campagne, à l'emplacement de l'ancien château.