『上月文書』『播磨征伐之事』等の記録史料によれば、城主は赤松氏一族の三枝氏(光枝氏)と伝わる。