En , après l'évacuation de Norfolk par les forces sudistes pendant la campagne de la Péninsule, il aide à la construction des défenses de Richmond sur le fleuve James autour de Drewry's Bluff. Peu de temps après, il commande sa brigade à la bataille de Seven Pines, et à la bataille de Malvern Hill. Il combat aussi lors de la seconde bataille de Bull Run, de Fredericksburg, de Chancellorsville, de Gettysburg, de la Wilderness, et de Spotsylvania Court House.