チャールズ・ゴードン (初代アボイン伯爵)
第2代ハントリー侯爵ジョージ・ゴードン(英語版)とアン・キャンベル(Anne Campbell、1594年 – 1638年、第7代アーガイル伯爵アーチボルド・キャンベル(英語版)の娘)の四男として生まれた。1638年に母を失い、1639年に父と長兄ジョージがエディンバラで投獄され、さらにジョージが1645年7月のアルフォードの戦い(英語版)で戦死、次兄ジェームズ(英語版)が1648年にフランスに逃亡したのち1649年2月にパリで死去、直後の1649年3月22日に父が処刑されるなど悲惨な幼年時代を過ごした。ゴードン自身は1644年から1648年まで三兄ルイス(英語版)とともにアバディーンの学校に通っていたが、1649年にはストラスボギー(英語版)で捕虜にされた。
父の死に伴い、三兄ルイスがハントリー侯爵位を継承したが、ハントリー侯爵家の領地はこのとき議会派に属する初代アーガイル侯爵アーチボルド・キャンベルに占領されていた。1650年にチャールズ・ステュアート(後の国王チャールズ2世)がスコットランドに上陸してゴードン城(英語版)で一夜を過ごしたとき、城は無人だったという。