El Castillo pasó después, en el siglo XVII, a dominio de dichos Duques.