В годы польско-шведской войны (1600—1629) замок был частично разрушен. В 1658 году стены замка не выдержали осады войсками царя Алексея Михайловича.