A la muerte de Cortés en 1547, la obra constaba de tres patios arcados y dos pisos, así como de una extensa huerta en el área que luego sería la Plaza del Volador y que hoy ocupa el edificio de la Suprema Corte de Justicia de la Nación.