После строительства в военных целях по приказу Сигизмунда II в 1563 году Суражского замка получил статус города. В 1570 году с целью привлечения новых жителей Сураж получил такие же права и вольности, как и Витебск. В 1570 году становится центром староства. Во время русско-польской войны 1654—1667 гг. взят русскими войсками, по Андрусовскому перемирию (в 1667 году) возвращён Великому княжеству Литовскому.