ઘણા વિદેશી સત્તાઓને આ મંદિર તોડી પાડવાના નિષ્ફળ પ્રયાસ કર્યો હતો, જે અવારનવાર મંદિરના મિલકત લૂંટી લીધું, કારણ કે તે ઘણી વખત આ મંદિર નાશ કરવા દુષ્ટો પેદા એમ એમ એવા પવિત્ર આત્માઓનો જન્મ થયો.