После ранения Андерсон несколько месяцев выздоравливал в Чарльстоне, поэтому не принял участие в экспедиции Лонгстрита на запад и в сражении при Чикамоге. Он присоединился к Лонгстриту только в октябре 1863 года, во время осады Ноксвилля. Весной 1864 он принял участие в сражениях Оверлендской кампании, где его бригада числилась в дивизии Чарльза Филда. Во время битвы в Глуши он участвовал в знаменитой контратаке Лонгстрита, которая спасла от разгрома корпус Эмброуза Хилла. На поле боя при Спотсильвейни бригада Андерсона прибыла одной из первых, и заняла позиции на холме Лоурелл-Хилл, которые удерживала все шесть дней. При Колд-Харборе он удерживал левый фланг позиций корпуса Ричарда Андерсона.