Durante el reinado de Felipe II la abadía sufrió una pérdida de prestigio debido a que quedó ubicada fuera de los muros que se construyeron para proteger la ciudad.