Era hijo de José Fadrique de Toledo Osorio, VIII marqués de Villafranca, y de Catalina de Moncada y Aragón, IX duquesa de Montalto.