Tras la construcción del palacio, la fachada del Real Sitio que era adyacente al camino de Alcalá quedó literalmente pegada a uno de los extremos de la puerta, mientras que el otro en el comienzo del prado de Recoletos había quedado prácticamente encajado en los muros del pósito establecido desde 1667 en los terrenos inmediatos.