1914年にジョーはボストン市長を務めた有力者ジョン・F・フィッツジェラルドの長女ローズ・エリザベス・フィッツジェラルドと結婚し、二人の間には九人の子供が生まれた。
1914年，约瑟夫与波士顿市长约翰·F·菲茨杰拉德之女罗丝·菲茨杰拉德结婚，婚后共育有四儿五女。