La ermita anexa fue construida en 1790 por los frailes dominicos por la necesidad de acondicionar el espacio para el culto, ya que se había vuelto a trasladar la imagen de la Virgen a la cueva por la destrucción el 15 de febrero de 1789 del santuario a causa de un incendio.