同防御条约》。1958年8月，继董显光担任驻美大使，表现深受艾森豪、邱吉尔、肯尼迪等西方冷战领袖的肯定。后因与蒋介石在外蒙古入联问题上持不同策略，于1961年奉急召返国，旋被免职：先遭“留在总统身边以备顾问”为由不得返任，后在当年11月改聘为行政院政务委员，从此遭到长期监视，并被禁止出国长达16年。
晚年.1978年5月后转任总统府资政闲职。离开仕途后寄情书画，「怒而写竹，喜而绘兰，闲而狩猎，感而赋诗」，称自己是「悲剧的一生」，梁实秋亦形容其晚年“情况相当落寞”。1981年