メリーランド植民地
ステュアートはアメリカ独立戦争に従軍した医師であるジェイムズ・ステュアートの孫であり、1721年にスコットランドのパースシャーからメリーランドに移民してきた医師のジョージ・H・ステュアートの曾孫だった。この曽祖父はメリーランド植民地総督ホレイショ・シャープの下で騎馬民兵隊の中佐だった。