“在湖中立塔以为标表，着令塔以内不许侵为菱荡”。苏轼所建三塔毁于元代。现存石塔为明天启元年（1621年）重建，即“池外造小石塔三座，谓之三潭”。（一说明天启年间所建的塔在清朝初年毁废，现存三塔为清代康熙年间所制。）2005年，“西湖三潭石塔”成为浙江省文物保护单位。2013年，“西湖十景”被列为全国重点文物保护单位。2013年7月29日晚十时，三潭石塔中南部的塔被游船撞倒，落入水中。管理部门连夜行动，请专业潜水员入水打捞，终于将塔的各个部件捞出水面，原位拼装，次日凌晨时景区基本恢复原貌。2004年的