Originariamente se encontraba en la Carrera de San Jerónimo, en el sitio de la actual Plaza de Cánovas del Castillo, ya que por entonces y hasta mitad del siglo XIX hasta allí se extendía el Real Sitio del Buen Retiro.