Det var på 1400-tallet at kong Lodro Tobten bygde klosteret (eller Derge Gonchen-klosteret). Ifølge tradisjonen foretok Thangtong Gyelpo konsekrasjonen av byggestedet i 1448, etter å ha meditert en stund i en grotte i bergveggen på motsatt elvebredd. Denne grotten er fremdeles et pilegrimsmål.