英国早期海军上校哈罗德·考克斯（）的后人，考克斯曾同意毛伊岛总督基奥莫古二世借用姓氏，更名乔治·“考克斯”·卡合基利·基奥莫古二世（）。亨利的夏威夷语名源自外公胡鲁鲁（），他曾与哥哥霍皮利（）一起协助将卡美哈梅哈一世国王的遗骸藏在秘密地点。“胡鲁鲁”在夏威夷语中意为“躺在受到庇护的水域”。亨利的姐姐是玛丽·皮特曼·艾劳（，1838至1905年），弟弟叫本杰明·富兰克林·基奥拉卡拉尼·皮特曼（，1852至1918年），还有同父异母的妹妹玛丽亚·基诺尔·皮特曼·莫雷（，1858至1892年）。父亲经商非常成