ウィリアム・サマーヴィル (初代アスラムニー男爵)
1832年12月22日、マリア・ハリエット・カニンガム(Maria Harriet Conyngham、1843年12月3日没、初代カニンガム侯爵ヘンリー・カニンガムの末娘)と結婚、1男1女をもうけた。
エリザベス・ジェーン(英語版)(1834年6月21日 – 1882年5月31日) - 1856年12月18日、第3代チャールモント伯爵ジェームズ・コールフィールドと結婚、子供なし
ウィリアム・ヘンリー・マーカス(1837年9月11日没) - 夭折
1860年10月16日、パリのイギリス大使館でマリア・ジョージアナ・エリザベス・ジョーンズ(Maria Georgiana Elizabeth Jones、1831年6月24日 – 1899年1月6日、ハーバート・ジョージ・ジョーンズの娘)と再婚、2男6女をもうけた。
メアリー・アン・ブランシュ(Mary Anne Blanche、1861年7月16日 – 1949年1月4日没) - 生涯未婚