El castillo sufrió reformas y ampliaciones de importancia en la segunda mitad del siglo XV, quizás, al entrar a formar parte de las posesiones de linaje de los Velasco, cuyas armas campean en uno de los torreones.