Sin embargo, el Terremoto Magno del 13 de mayo de 1647 dañó gravemente el edificio, el cual perdió su torre y el segundo piso de los claustros.