Etter den svenske erobringen under Livlandskrigen i 1580, bygget svenskene om festningen etter datidens vestlige idealer. Ved freden i Teusina gikk svenskene med på å tilbakeføre festningen til russerne, og dette ble effektuert i 1597.