Et svensk kart fra 1816 viser at gruntvannsområdet innenfor Holmen var nesten gjenfylt, mens Fehrs kart fra 1844 viser bare to favners dyp midt i vika, mens det var fem favners dyp ved den nåværende småbåthavnen nedenfor Akershus festning. En vintervei førte over isen til gårdene i strøket. Trafikken var stor; vekterne ved skipsråkene i Bjørvika rundt 1850 rapporterte passering av mellom 500 og 1 000 sleder i døgnet. Rundt 1850 rapporterte en kaptein Finne også om godt fiske av hvitting og småmakrell i Pipervika. I 1854 flyttet Akers Mekaniske Verksted fra Grünerløkka til Pipervika og etablerte seg der under navnet Akers Verft, som først ble nedlagt i 1982.