Bien es verdad que fue construido en el lugar que ocupaba una antigua fortificación que podría haber sido levantada en época visigoda y reformada durante la ocupación musulmana.