曾在醇亲王墓设坛，之后八国联军焚毁了该园寝的多处建筑。1933年，阴宅享殿被毁。抗日战争爆发后，醇亲王墓遭到盗掘。中华人民共和国成立后，退潜别墅和墓葬的部分石料被挪作他用，而退潜别墅整体被商务部机关服务局用作机关驻地。文化大革命期间，醇亲王墓阳宅被作为五七干校驻地。1984年，醇亲王墓被公布为北京市文物保护单位。1990年2月23日，北京市人民政府公布了醇亲王墓的保护范围，包括阴宅、阳宅在内的所有建筑和附近花椒湖的山石与石刻全部算入保护内容，阴宅南墙外的娃娃坟坟墙部分则算入Ⅰ类建设控制地带。1999年，碑亭