議員退任以降も「グレンヴィル男爵が与党に復帰するとその秘書官になる」「親族の援助を借りて議員に返り咲く」「ジョージ・カニング(1808年)やカースルレー子爵(1815年7月)に外交職への任命を求める」など多くの噂や動きがあったがいずれも実現せず、1821年にウィリアムズ＝ウィン家が首相リヴァプール伯爵と和解してようやく(1822年2月)に任命されたが、この任命は1822年3月に貴族院で、5月に庶民院で批判を受けた。