In der „Schwedischen Sintflut“ wurde die Burg 1656 von schwedischen Truppen niedergebrannt. Gleichwohl wurde sie 1703 wiederum von schwedischen Truppen als Wachposten benutzt, als diese die Stadt belagerten. Im 18. Jahrhundert gelangte die Burg in den Besitz der Familie Dębski.