Al perder su función defensiva, el castillo entró en decadencia y comenzó un progresivo proceso de ruina, que llevó al Ayuntamiento a plantearse su demolición a principios del siglo XX.