La villa estaba defendida por el Castillo de Alija y la fortaleza de Peñaflor que protegían el Puente del Conde.