父・安蔵は、豊橋市に駐屯していた陸軍第十五師団に蹄鉄・馬具・蹄油などの物資を納入する「内山安蔵商店」を営んでいたが、金子が12歳の時(1924年(大正13年)10月3日)に死去。