El núcleo principal de terrenos que forman su actual extensión lo constituyen los que adquiriera -entre 1862 y 1867- Don José de Buschenthal, para diseñar y construir en ellos su célebre quinta que llamó del “Buen Retiro”.