Su transformación barroca va a seguir un proceso escalonado que coincide con el año 1661 en que empezaron los nuevos trabajos de ampliación acometidos por el arquitecto Louis le Vau, quien había maravillado al monarca demostrando su maestría en la construcción del Chateau de Vaux Le Vicomte.