577年，当时称“热希拉布杰令”，俗称“昂苏庙”。《乌审召史略》载，来自西藏的一位叫囊索的喇嘛，于清朝康熙五十二年（1713年）在此兴建了一座小庙（另一说康熙五十二年赐名“甘珠尔瑙敏寺”，俗称“乌审召”）。清朝干隆初年（1734年后），该旗第五任扎萨克喇什色楞扩建该庙，建起了一座32间的大经堂，并从西藏请了一位喇嘛担任掌师。干隆二十九年（1764年），该旗第六任扎萨克沙格尔都扎布请七世达赖派遣在拉萨的喀尔喀部喇嘛罗桑多尔济来本寺，罗桑多尔济后来成为本寺第一代活佛。因为罗桑多尔济途经青海塔尔寺时，带了两尊檀木