A lo largo de los siglos ha sufrido varias modificaciones significativas como la de 1618, cuando se derribó el ala oeste para construir la Iglesia del Sagrario.