Під час Шведського потопу у 1657 році шведські війська, що відступали, розграбували і знищили замок, про що свідчить люстрація з 1660 року. Після того замок більше не відбудовували. Його ще частково використовували до початку XIX століття, після чого його було покинуто. У другій половині XIX століття шукачі скарбів підірвали єдину вцілілу частину замку — вежу та мури нижнього замку.