En las cuentas presentadas al obispado en 1589 se mencionan por primera vez los pagos de Arbejales, Palmar y Laurelar, aunque el primer núcleo de población debió ser en el entorno de la primera ermita, emplazada probablemente en el solar hoy ocupado por el palacio episcopal o en los alrededores, en las tierras que siempre fueron conocidas como "Huerta de la Virgen".