Aquella primera ermita duró hasta el terremoto de Lisboa, en 1755, que la dejó en ruina; la Virgen del Rocío fue llevada entonces a Almonte y estuvo allí durante dos años, celebrándose allí la Romería del Rocío.