于英格兰索美塞得郡的巴斯，父亲是威廉·阿美士德中将，母亲名伊莉莎伯·彼得森。阿美士德早年入读牛津大学基督教堂学院，先于1793年取得文学士学位，后于1797年以文学硕士学位毕业。阿美士德的叔父第一代阿默斯特男爵杰弗里·阿默斯特是着名的英国陆军将领，曾任弗吉尼亚和英属北美洲总督等职，由于他在1797年去世时没有子嗣，所以其贵族爵位就由阿美士德继承。受到叔父的影响，阿美士德很早就对外交事务产生浓厚兴趣。在1804年至1813年，阿美士德勋爵曾出任寝宫侍臣；期间于1809年至1811年到那不勒斯出任宫廷使节。