张国知多郡小野浦（今爱知县美滨町），14岁当上了海员。1832年10月，音吉与另外13人随载有稻米及瓷器的货船「宝顺丸」出海，原计划由鸟羽出发前往江户，但途中不幸遇上暴风，船只遭到摧毁，音吉等船员随船只残骸漂流至太平洋。船只在海上漂流14个月后，终抵达北美洲，最后有3人生还，包括音吉、岩吉及久吉，其余船员有不少均死于坏血病。音吉等人于美国西海岸奥林匹克半岛福拉德利角上岸，并向当地的印第安人玛卡族求救。但玛卡族对音吉等人并不友善，三人成为玛卡族人的奴隶，随后三人被卖予一艘属哈德逊湾公司的英国商船。