如此，由于纽卡斯尔公爵这时年事已高，因此纽卡斯尔的支持者转而奉罗金汉侯爵为领袖，组成所谓的「罗金汉辉格党人」（Rockingham Whigs）。此外，他又在1763年4月获邀出任其母校西敏公学的信托人，后更在同年10月击倒对手乔治·格伦维尔，获选为查特豪斯公学总裁。
出任首相.在1763年4月，标得伯爵因失势而卸任首相，乔治三世遂改召乔治·格伦维尔接任组阁，不过，格伦维尔在议会的支持度始终有限，而政府又于1765年通过对北美十三州殖民地引入《印花法令》，引起很大争议，后来格伦维尔