De polsk-litauiske regenter anvendte slottet under besøg i byen efter kongeslottet var brændt ned omkring 1657 under den polsk-russiske krig 1654–1667. Den russiske zar Peter den Store oprettede hovedkvarter på slottet i 1705 og 1709 under den Store Nordiske Krig.