No se llevó a cabo, y durante el siglo fue objeto de ampliaciones y modificaciones, lo que no impidió que el edificio fuese deteriorándose, lo que unido a la paulatina urbanización de la zona (lo que posteriormente sería el barrio de Argüelles), hizo que a finales de siglo el Ministerio de la Guerra fuese dictando varias normas que permitieran su derribo.