Det første slottet ble oppført i 1680 av Jacques Gabriel på ordre av kongens kusine Anne Marie Louise av Orléans, som holdt det som sommerresidens. Det ble senere eid av tronfølgeren Ludvig av Frankrike (1661–1711) og kongens illegitime datter Marie Anne de Bourbon, innen det ble kjøpt av Ludvig XV i år 1739.