Tras los Romanos llegan los Visigodos, que levantaron una fortaleza sobre los restos de una fortificación romana, donde hoy se alza el Castillo.