Después de los días del VI duque del Parque, fallecido en 1791, el palacio dejó de ser habitado por sus titulares aunque seguiría en propiedad de la familia un siglo más.