Hampton Court Palace
1750年12月7日にマーガレット・バロウズ（Margaret Burroughs、生没年不詳、ハンプトン・コート宮殿付牧師バロウズ医師の娘）と結婚した。4代公はマーガレットの死後、1789年6月29日にメアリー・ベシン（Mary Bechinne、1838年4月9日没、ベンジャミン・ベシン海軍大尉の娘）と再婚した。いずれも夫妻に子はなかった。メアリーは公爵と死別後に（の次男）と再婚している。