Весной 1864 года Уокер продолжал командовать бригадой каменной стены в составе дивизии Джонсона. Он одним из первых вступил в бой во время сражения в Глуши. Через несколько дней его бригада попала под массированную атаку противника в сражении при Спотсильвейни. Этот бой стал последним в истории бригады каменной стены. Уокер едва избежал плена, но был тяжело ранен и выбыл из строя.