Он стал 4-м герцогом Ричмондом 29 декабря 1806 года, после смерти своего дяди, Чарльза Леннокса, 3-го герцога Ричмонда (1735—1806). В апреле 1807 года он стал лордом-лейтенантом Ирландии. Он оставался на этом посту до 1813 года. Он участвовал в Наполеоновских войнах и в 1815 году командовал резервными силами в Брюсселе, которые защищали этот город на случай победы Наполеона в битве при Ватерлоо. 15 июня, в ночь перед битвой при Катр-Бра, его жена устроила бал для его товарищей-офицеров. Это блестящее торжество прославилось как бал герцогини Ричмондской и было увековечено Уильямом Мейкписом Теккереем в «Ярмарке тщеславия» и лордом Байроном в «Паломничестве Чайльд-Гарольда».