Den fjerde Panchen Lama, Lobsang Chökyi Gyaltsen, gjennomførte utbygninger av klostret, hvorpå det tjente som hovedsete for alle følgende Panchen Lama. I 1791 ble klosteret angrepet og plyndret av nepalske Gurkha-soldater, som senere ble drevet ut av Tibet av tropper fra Qing-dynastiet.