Wykształcenie odebrał w Westminster School. W 1750 r., po śmierci swojego ojca, został księciem Richmond i Lennox i zasiadł w Izbie Lordów. 11 grudnia 1755 r. został członkiem Towarzystwa Królewskiego. Po zakończeniu nauki wstąpił do brytyjskiej amii i brał udział w walkach wojny siedmioletniej. Odznaczył się zwłaszcza w bitwie pod Minden, stoczonej 1 kwietnia 1759 r. Został wtedy awansowany na stopień pułkownika.