军士兵。夏威夷王国在19世纪尚属独立国家，据确切记载，有上百名夏威夷原住民或在该国出生的公民投身南北战争，这些人统称“南北战争夏威夷之子”，皮特曼便是其一。皮特曼在夏威夷王国希洛出生并长大，母亲基诺利奥丽丽哈是夏威夷贵族，父亲本杰明·皮特曼是来自马萨诸塞州的美国移民先驱，亨利是家中长子。本杰明经营的捕鲸生意和糖类与咖啡作物种植园都很成功，基诺利奥丽丽哈的家族与夏威夷皇室关系密切，皮特曼一家声名显赫，是夏威夷岛和檀香山的地主。像其他夏威夷混血儿童一样，亨利和姐姐玛丽都在希洛的教会学校求学。1855年母亲去