相一年后，决定在1766年7月辞职。辞任首相后，罗金汉侯爵在野共16年之久，期间一直处于反对派位置，未曾于内阁供职，一直到1782年3月，托利党的诺斯勋爵因英军大败于美国独立战争而辞任首相，乔治三世唯有第二度召罗金汉组阁。在第二段任期期间，他率先承认美国独立，而且还大大扩充了爱尔兰国会的立法职能，另外又改组内阁制度，首创设立内务大臣及外务大臣两职。然而，罗金汉未及见证英、美两国在1783年正式签署代表终战的《巴黎条约》，便突然在1782年7月1日病死，前后在任仅两个多月，终年52岁。他死后，英国政坛一度