Durante la primera administración de Gladstone fue Lord Presidente del Consejo (1868–73), actuando también como Presidente de la comisión conjunta para redactar el Tratado de Washington (1871) con los Estados Unidos.