吉行淳之介
作家・詩人の吉行エイスケは父。美容師の吉行あぐりは母。女優の吉行和子、詩人の吉行理恵は妹。生家の土建会社「株式会社吉行組」(岡山市)は、祖父の死去後、叔父が後を継いだ。淳之介自身も吉行組の無報酬重役を務めていた。
前述の通り本妻との間に女児が1人いるが、妹・和子及び理恵には子女がなかったため、この女児が吉行エイスケ・あぐり夫妻の唯一の孫となる。
文学のテーマ同様にその人生は常に女性に彩られていた。若い頃に結婚した妻の吉行文枝との間に女児が一人いた。後に別居し、結婚後約10年後に知り合った女優の宮城まり子は生涯に渡り同居した事実上の伴侶となったが、妻は終生離婚に応じなかった。その他にも愛人がおり、死去後に大塚英子と高山勝美が名乗り出ている。大塚が『暗室のなかで 吉行淳之介と私が隠れた深い穴』で、高山が『特別な他人』で、宮城が『淳之介さんのこと』で、そして本妻の文枝が『淳之介の背中』で、それぞれの体験を公表している。
大層女性にモテたことで知られているが、奥本大三郎は吉行を「まぎれもなく女性嫌悪思想の系譜に連なる作家である」と指摘しており、また、「女性嫌悪思想の持ち主というのは、どうしても女に無関心でいられない」のが「弱点」であるとも記している。奥本はまた、吉行に女性読者が増加していることを称して「猟師の鉄砲に小鳥が止まったような具合」と形容している。フェミニストの上野千鶴子は、ミソジニー(女性嫌悪、女性蔑視)傾向の強い作家として吉行以外に永井荷風を挙げており、ミソジニーの男性には「女好き」が多いと指摘している。友人の遠藤周作は時おり随筆で「吉行世之介」と書いてからかっている(「世之介」は、井原西鶴著『好色一代男』の主人公)。