Festningen kom under svensk kontroll i 1581, men freden i Teusina i 1595 ga den tilbake til russisk kontroll. I 1612 ble den igjen erobret av svenskene, og freden i Stolbovo i 1617 gjorde slutt på den ingermanlandske krigen og gjorde hele Ingermanland til svensk område under Gustav II Adolf. I 1704 ble festningen igjen russisk etter erobring av Peter den store under den store nordiske krig.