Le , il quitte le gouvernement à la suite du remaniement ministériel organisé par le nouveau président Chester A. Arthur, après l'assassinat de Garfield.