蕃王朝的后裔认为这里地形殊异，具有祥兆，便在山上建立了宗堡。十四世纪萨迦王朝时，当地首领重修了宫殿和宗堡，并起名为“杰卡尔孜”，藏语意为“至高无上的王宫”。江孜即为其简称“杰孜”的藏语变音，后来成为地名。清朝时，江孜宗政府设于宫堡内，于是这座山便被叫作“宗山”。1904年，为抵抗英国军队进犯而在半山上修建了炮台等防御工事，但面对实力远强于己的英军，据守此地的军民最终被击溃。江孜县于1960年设立，目前隶属于日喀则市，并与名城桑珠孜区相毗邻。除江孜宗山抗英遗址外，江孜境内还有白居寺、帕拉庄园等名胜古迹。其