亨利·李探讨是否邀请亨利一起参加总统大选，但亨利不愿意。州议会同年推举他当州长，亨利也以年龄和身体状况为由谢绝。多次谢绝官职令他的名望进一步提高，就像华盛顿一样成为人民眼中的辛辛纳图斯，放弃权力回家务农。1792年，亨利卖掉爱德华王子县地产，举家迁居坎贝尔县的长岛种植园。1794年他买下夏洛特县的红山（），这里距一家人生活的布鲁克尼尔（）很近，但“身体吃不消的季节”就会搬回长岛过日子。1796年，老友亚当斯在大选中战胜对头杰斐逊当选总统，令亨利非常欣慰，但他忠于联邦党的立场受到1798年《客籍法和镇压叛乱