ペン・カーゾン
1787年7月31日、ソフィア・ハウ(1762年2月19日 – 1835年12月3日、初代ハウ伯爵リチャード・ハウの娘、1799年に第2代ハウ女男爵)と結婚、3男1女をもうけた。
ジョージ・オーガスタス・ウィリアム(1788年5月14日 – 1805年1月6日)
マリアン(Marianne、1790年8月30日 – 1820年2月18日)
レスター(Leicester、1792年11月8日 – 1793年2月26日) - 早世
リチャード・ウィリアム・ペン(1796年12月11日 – 1870年5月12日) - 第2代カーゾン子爵、初代ハウ伯爵、第3代ハウ男爵