Cuando Charles Sumner murió en 1874, algunos Republicanos propusieron a Garrison como un posible candidato al senado, propuesta que él mismo declinaría