После сдачи Петерсберга 3 апреля Пикетт отступал на запад вместе с армией Ли. 6 апреля его дивизия приняла участие в арьергардном сражении при Сайлерс-Крик, где федералы пытались уничтожить корпус Юэлла, отставший от основных сил армии. Дивизия Пикетта была обращена в бегство войсками генерала Мерритта. Пикетту теперь некем было командовать, и 7 апреля генерал Ли снял его с командной должности. Однако Пикетт остался при армии.