1783年にはノース卿フレデリック・ノース派ホイッグと連立を組み、第3代ポートランド公爵ウィリアム・キャヴェンディッシュ＝ベンティンク内閣を成立させ、その外務大臣となるも、国王ジョージ3世との対立により内閣は短期間に終わる。