A partir de entonces el Condado de Vía Manuel y el Marquesado de Rafal permanecieron unidos durante más de 60 años, hasta que en 1899 la IX Condesa María Isabel Manuel de Villena y Álvarez de las Asturias cedió el Marquesado de Rafal a su segundo hijo Alfonso, reservando el Condado de Vía Manuel para su primogénito Arturo de Pardo y Manuel de Villena, Duque de Arévalo del Rey.