1864 ના અંતમાં, શેરમન સાવાનાહ તરફ આગળ વધીને સાથે, કેટલાક કેદીઓને એન્ડરસનવિલે પાછા ફેરવ્યાં, જેલની વસ્તી લગભગ 5,000 જેટલી વધી ગઈ.