Parken ble anlagt i 1186 under Jin-dynastiet (1115–1234) og ble utvidet under Yuan-dynastiet og Ming-dynastiet. I 1745 anordnet Qianlong-keiseren (1711–1799) bygging av flere nye haller, paviljonger og haver, og gav den et nytt navn, Jingyihaven. Meget ble skadet eller ødelagt av utenlandske styrker ved to anledninger. I 1860 herjet britiske styrker ikke bare det gamle sommerpalasset, men også i Xiangshanparken. Og i 1900 rammet åttenasjonsalliansens represalier etter bokseropprøret medførte store skader, likesom inne i byen og i det nye sommerpalasset.