En 1809, el rey ordenó demoler las manzanas que se hallaban al este del palacio, con objeto de abrir una avenida monumental que conectase el lugar con la [[Puerta del Sol (Madrid)|Puerta del Sol]].