寺院逐渐衰败，清代时周边寺院还曾于康熙十三年（1674年）有过修葺，至民国年间塔林已经因为年久失修而出现大批自然损毁。1941年，日军在围攻八路军的平北根据地时拆除了法华寺及其周边寺庙，并对塔林进行了大规模破坏，在这次破坏之后仅剩辽金时期的5座大塔和元明清时期的十几座小塔。
布局.
整体布局.银山塔林共有18座塔，其中5座金代的密檐式墓塔位于法华寺遗址内，以梅花形排列，正中心一座是佛觉塔，西南侧为懿行塔，东南侧为晦堂塔，西北侧为圆通塔，东北侧为虚静塔。此外有一