Den første befestningen på stedet skal ha vært anlagt av svenskene under Torgils Knutsson i 1299, men den ble allerede i 1301 tapt til Novgorod. Den russiske festningen ble opprinnelig bygget i 1323 som en trefestning kalt (også ) av storfyrst (Князь–) Jurij av Moskva (i egenskap av fyrste av Novgorod) på vegne av Republikken Novgorod, for å vokte de nordlige adkomstene til Novgorod og tilgangen til Østersjøen. Festningen ligger på øya Orekhovets, hvis navn kommer av det russiske ordet for nøtter, antagelig fordi det vokste mange hasseltrær på øya. Dette gjenspeiles i navnet på festningen både i det russiske («Nøtt»), det svenske , og det finske («Nøtteøya»).