Cuando tenía dos años sus padres emigraron en 1833 junto con otros dos hijos y se asentaron en New Bedford, Massachusetts, ciudad en aquel tiempo importante por su industria derivada de la caza de ballenas.