Jang Bahadur tilhørte chhetri-kasten. Hans familie var høytstående statsledere og offiserer på både mors- og farssida. Hans mors onkel var Bhimsen Thapa, Nepal/Gorkhas første store statsminister på 1800-tallet. Hans oldefar på farssida var en viktig militær leder under kong Prithvi Narayan Shah på 1700-tallet. Hans bestefar var en viktig militær leder i krigen mot Kina i 1791–1792 og ble en av de fire administrative lederne av staten (kaji). Faren hans, (opprinnelig ) var tilstede ved hoffet den dagen kong ble myrda, og drepte morderen på stedet. For det ble han belønna med å bli Kaji, og stillinga ble gjort arvelig i hans familie.