1864年夏末，南方邦联表示，如果北方联邦派船（安德森维尔是内陆地区，只有铁路可达）来接收，愿意无条件释放战俘。1864年秋，攻占亚特兰大之后，只要是身体还能够行动的囚犯，都送往乔治亚州米伦和南卡罗来纳州佛罗伦萨。米伦的大部分条件较好，在威廉·特库姆塞·舍曼将军开始向大海进军后，囚犯返回安德森维尔，那里的条件已经有所改善。在战争期间，45000名囚犯收入到安德森维尔监狱，其中有12,913人死亡。 他们的死因和方式持续在历史学家之间产生争议。有些人争辩说，这是南方邦联对联军囚犯故意所犯战争罪的结