På andre halvdel av 1300-tallet ser det ut til at riket gikk kraftig tilbake. De tibetanske provinsene gikk tapt, og vasall-staten var sjølstendig i 1387. Varma-familien, etterkommere av Prithvi Mallas statsminister , tok over.