ただし初期の山上氏の居館は現在の城址ではなく、城址東方の善昌寺付近ともいわれる。