En 1858, Hector Lefuel acometió una importante transformación de los aposentos imperiales, la "loggia" y terraza sur que Le Vau había construido desaparecieron para dejar paso a nuevas estancias para la pareja imperial.