De ce qui fut considéré comme " le plus beau château d'Europe " au XVIIe siècle ne subsistent que deux pavillons, reliés par une galerie à l'italienne du XIXe siècle. Construit par Pierre le Muet pour la famille Bouthillier de Chavigny, Pont fut acheté successivement par Xavier de Saxe, oncle de Louis XVI et, après la Révolution, par Laetitia Ramolino, la mère de l'Empereur. La famille Casimir-Périer, l'occupera durant tout le XIXe siècle, et donnera à la France un président du Conseil et un président de la République.