Во время русско-польской войны в 1654 году Иказненский замок заняли московские, а в 1655 году — шведские войска. Замок был разрушен во время северной войны в которой Сапеги приняли сторону Станислава Лещинского и Карла XII.