Fue derrotado para la reelección en 1872 debido a que el clima político se había tornado más moderado.