Templet skal først ha blitt bygget i året 645 under Tang-dynastiets keiser Taizong. Det ble senere helt nybygd i Zhengtong-keiserens tid (1436–1449) under Ming-dynastiet.