En 1951, los temblores de tierra que sacudieron la provincia de Jaén agravaron los problemas estructurales que afectaban al templo; la imagen de la patrona tuvo que ser trasladada a una iglesia parroquial hasta que terminaran las obras de restauración que los terremotos hicieron necesarias.