Джордж родился в Эдинбурге 2 февраля 1770 года, старший сын Александра Гордона, 4-го герцога Гордона (1743—1827) и его жены, знаменитой (1748/1749 — 1812), урожденной леди Джейн Максвелл. Он получил образование в Итоне. Он стал профессиональным солдатом и дослужился до звания генерала. Будучи маркизом Хантли, он служил во Фландрии с 1793 по 1794 год. Он командовал 92-м горским полком, который первоначально был создан его отцом Александром Гордоном как 100-й пехотный полк 1794 года и переименован в 1798 году , а также командовал полком в Испании, Корсике, Ирландии и Нидерландах с 1795 по 1799 год, где он был тяжело ранен. Он командовал дивизией в экспедиции на Вальхерен в 1809 году.