En 1692, el Gobernador del Río de la Plata Agustín de Robles, adquirió unas 300 varas cuadradas en la meseta de El Retiro, a fin de edificar una casa de descanso que tuvo 39 habitaciones y 3 salas con techos, 42 estancias, de madera de cedro, 51 puertas, 12 escaleras, 7 ventanas con rejas de hierro y dependencias anexas.