La manzana en que se encuentra enclavado el edificio del Palacio está limitado al Norte con la calle de Alcalá, al Sur por la calle de Montalbán, al Este por la calle de Alfonso XII y al Oeste por el Paseo del Prado.