Poco a poco, el castillo fue abandonado, algunas ventanas clausuradas, hasta el abandono total en el siglo XVIII.