Em 1801 um relâmpago atingiu e destruiu os três últimos compartimentos da torre mas ela foi logo restaurada. O livro "The Closing Events of the Campaign in China" (Eventos de Encerramento da Campanha na China) de Granville Gower Loch (1843) contém uma descrição detalhada da torre, tal como era no início dos anos 1840. Nos anos 1850 irrompeu uma guerra civil na área em volta da torre quando a Rebelião Taiping alcançou Nanjing e os rebeldes Taiping tomaram a cidade. Eles destruíram as imagens budistas e as escadarias internas para não permitir que a plataforma fosse utilizada como um ponto de observação pelo inimigo Qing. Marinheiros americanos chegaram à cidade em maio de 1854 e visitaram a torre oca. Em 1856 os Taiping destruíram a torre para impedir que uma facção hostil a utilizasse para observar e bombardear a cidade. Após isto, os escombros da torre permaneceram esquecidos até recentemente, quando se iniciou um esforço para reconstruir o marco histórico.