Siete años después mandó iniciar las obras del castillo, situado hoy al oeste del actual casco urbano y del que sólo se conserva el patio de armas.