Peder Sæther ble født født 25. september 1810 i Nordstun Nedre Sæter i Disenå i Odalen, Hedmark. Sæthers foreldre var bonden Peder Larsen og Mari Kristoffsdatter, begge døde før gutten var elleve år. Sæther livnærte seg dels som fisker og gikk også i banklære i Christiania (eller Trondheim) før han utvandret til New York i oktober 1832 trolig på grunn av en farskapssak. Sæther var en tidlig utvandrer fra Norge og uvanlig ved at han hadde innledet karriere i bank i Norge.