Más tarde sus dueños fueron los condes de Cardona, los cuales vendieron, en 1503, la propiedad a María Enríquez y de Luna, Duquesa de Gandía.