El santuario de los Santos Antonios Abad y de Padua fue construido sobre un primitivo y simple eremitorio dedicado a San Antón, del que se tienen referencias escritas hacia 1212 al señalarse por la infanta doña Urraca las limosnas para dicho eremitorio.