Etternavnet oppgis i ulike varianter, både som Hagerstein og Haggerstein. En forfatter antar at navnet egentlig har vært Pehr Hagersten. Kapteinen på det britiske skipet «Duff», som kom til Tahiti i mars 1797, rapportert at han kom fra Helsingfors i svensk Finland og at han gikk under navnet Peter the Swede. Hagerstein var sjømann om bord på HMS «Daedalus», som var med i George Vancouvers ekspedisjon. I februar 1793, da skipet var på veg fra vestkysten av Nord-Amerika til New South Wales, hoppet han av og slo seg til på Tahiti. En annen svenske, Andrew Lind, hadde også slått seg til på Tahiti omtrent på samme tid.