Tras las vicisitudes ocasionadas tras la Invasión Napoleónica así como las diversas desamortizaciones acaecidas en España la Imagen del Sagrado Protector se ve obligada a cambiar de sede en diversas ocasiones, como hemos mencionado, hasta que en los años cincuenta se asienta en la actual sede franciscana del Ángel Custodio, en la calle de San Antón.