Tras haber hecho el acuerdo del regalo, el Ayuntamiento de Madrid se dispuso a realizar la adquisición de los terrenos y del edificio y el 24 de abril de 1817 adquirió la "Huerta de Romero", cuyo propietario era Manuel Romero, que había sido ministro de Justicia en los tiempos de José Bonaparte.