珠尔默特那木扎勒之乱发生，驻藏大臣傅清、拉布敦在“冲赛康”衙门被杀害，衙门也遭到焚毁。事平之后，干隆帝随即下令在此处衙门遗址上兴建“双忠祠”，以祭祀傅清、拉布敦。18世纪末，福康安在驱逐入侵西藏的廓尔喀军队后，对“双忠祠”进行大规模修缮，并立石碑。辛亥革命推翻清朝之后，“双忠祠”随之遭到废弃，先后被用作噶厦的交通局、警察局等办事机构。西藏和平解放后，人民政府在该大院内兴建了若干民居，供翻身农奴居住。1991年，冲赛康综合市场成立后，被人们俗称为“冲赛康”。而这座曾为驻藏大臣衙门的冲赛康大院，则被人们