После Геттисберга карьера Пикетта пошла на спад, причем без воздействия Ли или Лонгстрита. Зимой он управлял Департаментом Южной Виргинии и Северной Каролины, потом командовал дивизией при обороне Ричмонда. Затем его дивизия была направлена для поддержки операций генерала Ли во время Оверлендской кампании, как раз перед сражением при Колд-Харбор, где Пикетт оказался на неактивном участке поля боя. После этого сражения его дивизия участвовала в обороне Петерсберга. 1 апреля 1865 года Пикетт был разбит Шериданом в битве при Файв-Фокс, что показало слабость конфедеративных позиций и заставило Ли эвакуировать Ричмонд. Северовирджинская армия отступила к Аппоматоксу. Это стало ещё одним унижением для Пикетта, поскольку во время сражения он находился в двух милях от своих частей, вялил рыбу вместе с Фицхью Ли и другими офицерами. Когда он пришел на поле боя, сражение уже было проиграно и было уже слишком поздно возобновлять его заново.