981年(天禄12年)に従二位に列し、1223年(貞応2年)に現在地に遷座された。