时赐如意为香严寺住持。万历二十八年（1600年）夏末暴雨泛滥，丹江和淅水同时暴涨，将下寺山门、鼓楼、殿堂、屋宇淹没，四大天王、韦驮及十八罗汉佛像也随之消失。崇祯十七年（1644年）12月李自成、张献忠率军经淅川李官桥镇，意图围攻襄阳。军队驻扎在顺阳川，香严寺僧侣见势而逃，上寺禅院被义军烧毁。康熙三年（1664年） 宕山远禅师率众僧在上寺建大雄宝殿三楹、释伽牟尼像一尊（高三丈三尺）、韦驮神像一尊（一丈六尺），为木刻金饰。
近代史.民国十七年（1928年）鉴于多数寺庙改建学