石川三四郎
実父・五十嵐九十郎 - 先妻にヨネ、後妻にシゲ(三四郎の母)。五十嵐家は代々地元で、年貢米を江戸に運ぶ幕府特許の船着問屋業を営み、村の名主をしていた。九十郎は明治半ばに東京高崎間の鉄道(現高崎線)が通ると本庄駅に運送店を開くも失敗して借金を抱え、家業は親族に任せて隠遁生活を送ったが、三四郎から罹患した赤痢がもとで死亡した。
実母・シゲ - 九十郎の後妻。息子の犬三の東京遊学に伴って上京し、下宿屋を始め、茂木虎次郎、橋本義三はじめ多くの学生の食住の世話をした。
養父・石川半三郎
異母兄・五十嵐宰三郎(1858-1923) - 1891年の埼玉硫酸事件に関わり逮捕され、共犯者らとともに鍛冶橋監獄に収監された。1年の刑期をおえて郷里に帰り、その後はなすところなく、65歳で没した。
兄・五十嵐犬三(1874-) - 東京法学院在学中、兄とともに埼玉硫酸事件に関わる。硫酸事件を発案し硫酸を調達し、逮捕後初審で禁錮1年を宣告されたが、再審で江木衷の弁護により無罪となる。法学院卒業後帰郷。
学生時代にできた婚外子の娘がいるが、兄夫婦の子として実家に預けられた。
養女に福田友作・福田英子の娘・千秋、評論家の望月百合子がいる。