La repoblación cristiana desde finales del siglo XI significa para la zona la fundación de nuevas aldeas, una de ellas sobre las ruinas del complejo palatino, edificándose una iglesia ya en el siglo XII, que para el siglo XV es una simple ermita en despoblado, dedicada a la Virgen de la Oliva.