因争取「美援」，中共及联合国向泰国、缅甸施压干预，于是武力部队回到台湾，留下少数由柳元麟指挥，后柳元麟回台湾。1954年，李弥率部撤往台湾，其下的段希文等部队接获蒋中正密令，自愿留下，成为泰北孤军。
晚年.李弥回台湾后，居台北新店镇北新路，成为天主教徒。1963年11月在中国国民党第9次全国代表大会上被选为中央评议委员。长子李云川、幼子李获之均学成居美国，女儿李心娥嫁至国外。1973年12月8日，李弥因心脏病复发逝世，死后治丧委员会，由何应钦、于斌、薛岳、李宗黄、张宝树主持。