Hacia 1783 sufrió una primera reforma: el duque ordenó eliminar tales adornos, agrandar ventanas y balcones, enlucir los muros, y adosó un pequeño pórtico con columnas a la puerta de la Carrera de San Jerónimo.