En 1875, Alfred Sommier, industrial azucarero, compró el palacio y lo hizo restaurar por Gabriel-Hippolyte Destailleur, los jardines fueron reformados por los paisajistas Lainé y Achille Duchêne.