Lee deltog i et møde for tidligere sydstatssoldater i 1870, hvor han udtrykte fortrydelse over sin overgivelse ved Appomattox Courthouse, under indtryk af effekten af den republikanske rekonstruktionspolitik i Syden. I en samtale med Texas tidligere guvernør sagde han: