Britse en Franse troepe wat Beijing in 1860 as deel van die Tweede Opiumoorlog ingeval het, het naby die poort kamp opgeslaan en dit oorweeg om die poort en die hele Verbode Stad af te brand. Hulle het uiteindelik daarteen besluit, maar het ooreengekom om eerder die keiser se Ou Somerkasteel af te brand. Die Qing-keiser het uiteindelik daartoe toegestem dat die buitelandse magte hul hoofkwartier in die gebied kon opstel. Tydens die Bokseropstand van 1900 het die beleg die kantoorkompleks geweldig beskadig en menige ministerie is afgebrand. In die ontknoping van die konflik het die gebied ’n ruimte vir die leërs en perde van die buitelandse troepe geword.