江戸日本橋堀留(現東京都中央区日本橋堀留町)にある、近江商人で綿織物問屋小林吟右衛門(通称丁吟)の店に丁稚奉公に入った。