グラフトン公
初代グラフトン公爵に叙されるヘンリー・フィッツロイ(1663-1690)は、チャールズ2世とその愛人バーバラ・ヴィリアーズ(後の初代クリーヴランド女公爵バーバラ・パーマー。第2代グラディソン子爵(英語版)ウィリアム・ヴィリアーズの娘)の間の3人の非嫡出男子のうちの次男である。非嫡出子なので王位継承権はなかったが、母バーバラは息子3人に高位の爵位を確保しようと宮廷工作に躍起になった。
その結果、ヘンリーには1672年8月16日にサフォーク州における初代ユーストン伯爵(1st Earl of Euston, in the County of Suffolk)とサフォーク州における初代イプスウィッチ子爵(1st Viscount Ipswich, in the County of Suffolk)とサフォーク州におけるサドバリーの初代サドバリー男爵(1st Baron Sudbury of Sudbury, in the County of Suffolk)、ついで1675年9月11日にグラフトン公爵の爵位が与えられた。これがグラフトン公爵家の創始となる
彼の兄チャールズ・フィッツロイはサウサンプトン公爵(またバーバラから第2代クリーヴランド公爵位を継承)、弟ジョージ・フィッツロイはノーサンバーランド公爵位を与えられている。しかしこの2人の家系は嗣子に恵まれず廃絶しており、現代まで残ったのはグラフトン公爵家だけであった。
初代公ヘンリーは、初代アーリントン伯爵ヘンリー・ベネットの1人娘(女子相続人)イザベラと結婚した。アーリントン伯位は特別継承権の規定で男子なき場合に姉妹間の優劣のない女系継承が可能であったため、ヘンリー・ベネットの死後イザベラが継承した。