ウィリアム・ダフ (初代ファイフ伯爵)
1719年、バンフシャーのカレンで第4代フィンドレイター伯爵および初代シーフィールド伯爵ジェイムズ・オグルヴィの娘ジャネット(Lady Janet Ogilvy、1721年没)と結婚したが、2人の間に子供はいなかった。
1723年に、第6代準男爵ジェームズ・グラント(英語版)の娘ジーン(Jean Grant、1788年1月16日没)と再婚し、7男7女を儲けた。
ウィリアム(1724年 - 1753年) 未婚のまま死去
アン(1725年 - 1805年)
ジャネット(1727年 - 1758年3月3日没) - ウィリアム・ゴードン(1751年没)と結婚、ジョージ・ヘイと再婚
ジェームズ(英語版)(1729年 - 1809年) 第2代ファイフ伯爵
アレグザンダー(1731年 - 1811年) - 第3代ファイフ伯爵