Abandonó el gobierno junto con Shelburne en abril de 1783, pero en diciembre de ese mismo año el rey Jorge III le nombró primer ministro, cargo que ocuparía durante dieciocho años.