I oktober 1781, under beleiringen av Yorktown overga britiske styrker under Charles Cornwallis. Dette tapet gjorde at det ble stilt mistillit mot North, og han ble den andre statsministeren i Storbritannias historie som måtte gå av på grunn av mistillit.