Da generalmajor Ambrose Burnside overtok ledelsen av Army of the Potomac, grupperte han korpsene sine i «store divisjoner» og utnevnte Sumner til å lede den høyre store divisjonen. Den gamle kavalerisoldaten deltok slik i det katastrofale slaget ved Fredericksburg hvor II Corps hadde store tapstall i frontalangrep mot befestede Marye's Heights.