こうして成立した第2次パーマストン子爵内閣（1859年-1865年）と続く第2次ラッセル伯爵内閣（1865年-1866年）にグランヴィル卿は枢密院議長として入閣した。第二次パーマストン内閣期の1863年から1864年にかけてドイツ連邦とデンマークがシュレースヴィヒ＝ホルシュタイン問題をめぐって対立を深めた。首相パーマストン卿と外相ラッセル伯爵は会議外交での収拾を目指したが、グランヴィル卿は介入に慎重だった。ヴィクトリア女王も介入に慎重でグランヴィル卿をお目付け役にし、パーマストン卿とラッセル卿の監視にあたらせた。この問題の間中、グランヴィル卿は女王からの指示に従って二人の動向を女王に報告し続けた。だがパーマストン卿とラッセル卿は、女王にもグランヴィル卿にも独断でロンドン会議開催の計画を推し進めた。1864年2月にドイツ連邦の二大国プロイセン王国とオーストリア帝国の連合軍とデンマーク王国軍の間で第二次シュレースヴィヒ＝ホルシュタイン戦争が開戦した。その間の4月から6月にかけてが開催されるも「鉄血宰相」の異名をとるプロイセン宰相オットー・フォン・ビスマルクの策動で会議は座礁し、何らの合意に達することもなく終わった。会議決裂を前にパーマストン内閣の閣議ではデンマーク側で参戦するか否かの議論も行われたが、グランヴィル卿は大蔵大臣ウィリアム・グラッドストンとともに参戦に反対した。参戦反対派が押し切った結果、イギリスは今後シュレースヴィヒ＝ホルシュタイン問題に関与しないことが閣議決定され、デンマークを見捨てることとなった。