Durante el reinado de la Casa de Borbón se continuaron las donaciones y mejoras del complejo, hasta llegar la noche del 5 de diciembre de 1808 en que entraron las tropas francesas, expulsando a los religiosos y convirtiéndolo en cuartel, produciéndose robos y destrucciones de innumerables obras de arte.