Во время восстания под предводительством Уота Тайлера в 1381 году мятежники, обвинявшие Джона Гонта в введении подушного налога, разрушили Савойский дворец и уничтожили всё, что в нём находилось. То, что нельзя было разбить или сжечь, они побросали в реку. Бунтовщики расколотили ювелирные украшения молотками, и, по преданию, убили одного из своих товарищей, когда обнаружили у него припрятанный серебряный кубок. Несмотря на разрушение дворца, это место сохранило название «Савой».