El definitivo asentamiento altomedieval de calles como «Atalaya», «la Cilla», «Peñas» o «Remoria» parece estar relacionado con la defensa fronteriza acontecida en la zona durante el siglo , momento en el que existió una atalaya en un promontorio rocoso próximo a la torre actual.