Su nombre volvió a aparecer cuando el nuevo ministro de Asuntos Exteriores, [[Heinrich Karl von Haymerle|Haymerle]], murió en el cargo en 1881, pero Taaffe y su coalición no tuvieron tiempo para un ministro de asuntos exteriores liberal (por no hablar de un húngaro y un masón), y fue rechazado a favor del conde [[Gustav Kálnoky]] (1881–1895).