Sin embargo, el castillo de Boltaña inició su decadencia hacia mediados del siglo XII, y aunque de llevaron a cabo algunas reformas durante los siglos XIII-XIV, quedó definitivamente abandonado a partir de los siglos XVII-XVIII.