Luego, María Josefa Pimentel y Téllez-Girón lo ingresó al ducado de la Casa de Osuna cuando contrajo matrimonio en 1771.