1950年代中期，拉铁摩尔等人的研究受到麦卡锡主义干扰。迪鲁瓦活佛因此而迁居纽约市，在纽约东区租住至圆寂前夕。此后，他把主要精力投入到宗教事务方面。在约翰·霍普金斯大学期间，迪鲁瓦活佛继续其宗教生活。1952年，流亡美国的卡尔梅克人将迪鲁瓦活佛迎至新泽西州，后在此修建了美国首座藏传佛教寺庙。此后，迪鲁瓦活佛成了这些卡尔梅克人的精神领袖，直到圆寂时一直任该寺堪布。当时流亡美国的卡尔梅克人主要包括三部分人员，一是俄国十月革命时从伏尔加河下游的家乡逃出者，二是原居住在捷克和南斯拉夫的卡尔梅克人后裔，三是斯大林