También se convierte en objetivo para los saqueadores vikingos y normandos entre los siglos X y XI, por lo que Alfonso V ordenó reconstruir las Torres del Oeste, el antiguo "Castellum honesti" de origen romano, a principios del siglo XI y, de este modo, la villa dejó de ser asaltada, disfrutando de una gran prosperidad durante los siglos XII y XIII.