当社の奥宮は、大山に登った修験者が、海抜900mほどの場所に簡易な遥拝所を設置したのが起源とされている。