Ha sufrido repetidos saqueos y reconstrucciones, entre ellos los de los turcos en el siglo XVII en el que quemaron el templo, o durante la Guerra Civil Española cuando se destruyeron o esquilmaron todos sus ornamentos, cuadros y joyas.