A finales del siglo XIV pasó por muchas manos hasta que en 1398 Juan Fernández de Velasco lo adquiere.