El 25 de agosto de 1844 falleció en este palacio el duque de Osuna, Pedro de Alcántara Téllez-Girón y Beaufort-Spontin.