ヘンリー・ヴァサル＝フォックス (第3代ホランド男爵)
その影響でホランド卿も8月には枢密顧問官に列する。さらに叔父が同年9月に死去した後の10月に王璽尚書として総人材内閣に入閣した。1807年3月に同内閣が倒れるまで在職した。
総人材内閣崩壊後、1830年の第2代グレイ伯爵チャールズ・グレイ内閣成立までホイッグ党の長い野党生活が始まるが、叔父チャールズの死後のホイッグ党はいくつかの派閥に分裂した。その中でホランド卿は旧派ホイッグ(Old Whig)と呼ばれる叔父の思想を引き継ぐ改革派閥を率いるようになった。そのため彼の屋敷であるホランド・ハウスは改革派議員の重要な会合場所として知られるようになった。彼の派閥から出た有名な改革派政治家にジョン・ラッセル卿(後の初代ラッセル伯爵)がいる。
旧派ホイッグ以外のホイッグ党の派閥としてはグレイ伯爵を中心とする超ホイッグ(Ultra Whig)、第3代ランズダウン侯爵ヘンリー・ペティ=フィッツモーリスを中心とする親トーリー的な穏健派(Moderates)、オルソープ子爵ジョン・スペンサーを中心とする若手議員の集まり青年ホイッグ(Young Whig)があった。しかしホランド卿は人民の友協会創設以来グレイ伯爵の薫陶に従ってたし、オルソープ子爵もグレイ伯爵との関係が悪くなかったので、ホイッグ党内で最も大きな力を持っていたのはグレイ伯爵だった。
ホランド卿はトーリー党自由主義勢力カニング派(英語版)(特に第3代パーマストン子爵ヘンリー・ジョン・テンプル)に注目し、彼らをホイッグ党に引き込むことに腐心した。