ジョセフ・P・ケネディ
1914年にジョーはボストン市長を務めた有力者ジョン・F・フィッツジェラルドの長女ローズ・エリザベス・フィッツジェラルドと結婚し、二人の間には九人の子供が生まれた。「幸せな大家族」というイメージとは裏腹にジョーは家庭を顧みず、ローズはやがて夫の女性問題を見てみぬふりをして生きるようになる。ジョーの在世中に亡くなった子供は四人。長男ジョー・ジュニア(ジョセフ・P・ケネディ・ジュニア)、次女キック(キャスリーン)は飛行機事故で亡くなり、次男ジャック(ジョン・F・ケネディ)、三男ボビー(ロバート・ケネディ)は暗殺された。長女のローズマリー・ケネディは「もともと知的に障害があり」、20代で「精神的に不安定になった」ため、「精神障害である」とされ、医師の勧めもあり、ジョーの指示で1941年にロボトミー手術を秘密裏に受けさせられた(当時、この手術は精神障害を好転させると信じられていた)。執刀は同手術の熱心な推進者だったジョージ・ワシントン大学医学部のジェームズ・ワッツ博士だった。
ジョーの任命を批判した人々も、その結果の前には彼の有能さを認めざるを得なかった。ジョーは一つの仕事をじっくりやるタイプではなかったので1935年9月には委員長の職を辞した。ジョーは財務長官のポストを望んでいたが、再選されたルーズベルトはそれを与える気はなかった。かといって、ジョーは在野にしておくと政権にどんな仇をなすかわからない。そこでルーズベルトは1937年3月、ジョーを連邦海事委員会の委員長に任命した。しかし、彼はこの程度のポストでは満足できず、わずか10ヶ月で辞任する。
1930年代、デトロイトのカトリック司祭チャールズ・カフリンは自身のラジオ番組によって大きな影響力を持っていた。1932年の大統領選挙ではルーズベルト支持であったが、1934年に反ルーズベルト派に転じた。カフリンの思想は、反共産主義、反ユダヤ主義、反ニューディール政策、そして孤立主義の支持であった。ルーズベルトはこのやっかいな論客を押さえ込むためにジョーを利用した。カフリンは自らユニオン党(Union Party)を結成するまでになっていた。そこでジョーはフランシス・スペルマン(ボストン大司教、後に枢機卿)とバチカンのエウジニオ・パチェッリ枢機卿(後に教皇ピウス12世)に圧力をかけてもらうことでカフリンを押さえ込んだ。