Esto supuso el abandono y ruina del Castillo-Palacio Ducal, que coronaba la villa.