代わってこの頃から禅福寺(別当寺)の社僧による支配が強くなって社家と争うようになり、その争いは明治の神仏分離まで続いた。