Van 1739 tot 1763 was het kasteel van "Champs-sur-Marne" in het bezit van Louis César. Zijn vader had dit kasteel in naakte eigendom gekregen van de prinses van Conti, een gewettigde dochter van Lodewijk XIV et Louise de La Vallière. Louis César de La Baume Le Blanc leidde daar luxueus leven en ontving de groten uit de literatuur van zijn tijd zoals Diderot, Voltaire, d'Alembert en Moncrif. Nadat het nieuwe kasteel dat hij zich liet bouwen in Montrouge voltooid was, verlaat hij "Champs-sur-Marne". Het kasteel werd verhuurd aan Madame de Pompadour van juli 1757 tot januari 1759. In november 1757 ontving de markiezin de Pompadour op het kasteel van Champs-sur-Marne Charles de Rohan, de prins van Soubise, bij zijn terugkeer van Rossbach In Saksen-Anhalt waar hij op 5 november 1757 de veldslag tegen Frederik II van Pruisen verloren had. Later, in 1763, werd het kasteel verkocht aan Gabriel Michel de Tharon (1702–1765), een rijke scheepsmagnaat.