各民族的工作，尤对蒙古族和藏族十分重视。清朝崇德元年（1636年）设立了主管少数民族事务的专门机构“蒙古衙门” ，崇德三年（1638年）改为“理藩院”。清军入山海关后，将理藩院设在今霞公府街南侧（1900年理藩院被拆除，原址建设北京饭店）。雍正帝还亲为理藩院题写训辞曰：“盛代声施赫濯，无远弗届，遐方属国，共效享王，务在弘宣德化以尽怀柔之道。”光绪三十二年（1906年），理藩院改称“理藩部”。清朝宣统年间，此街更名为“霞公府”。《京师坊巷志稿》载：“昔霞公者，公爵也，宅居巷内，是其名所由来也。”清朝温郡王