В 1864 году вернулся в Палату представителей, где, в частности, критиковал политиков из числа радикальных республиканцев, поддерживавших планы Линкольна по Реконструкции Юга. В 1868 году баллотировался в вице-президенты США, но проиграл выборы. Некоторые политики считали, что его драматические речи об опасностях чёрной эмансипации стоили демократам поражения в этих выборов. В 1870 году избран сенатором, но не сумел переизбираться в 1872 году.