築城に関しては不明な点が多いが細川氏(細川藤賢の父・細川尹賢ではないかという説もある)の誰かが築城したと考えられている。