12月のフレデリックスバーグの戦いは北軍のもう一つの挫折だった。足の傷から快復したフッカーは短期間第5軍団の指揮を執ったが、続いて第3軍団と第5軍団を統括する「大師団」指揮官に昇進した。フッカーは市の背後にある防御が施された高台を攻撃するというバーンサイドの作戦をあざ笑い、それを「非常識」と見なした。その大師団（特に第5軍団）は、フッカーが抗議したにも拘わらずバーンサイドの命令によって14度の無益な突撃を行い、甚だしい損失を被った。バーンサイドはこの戦いの後1863年1月にも惨めな「泥の行軍」を行い、フッカーの上官に対する批判は公式の命令不服従の域まで達した。バーンサイドのことを「卑劣漢...失敗した犠牲の」と表現した。バーンサイドはフッカーを含み、部下の指揮官総入れ替えを目論み、大統領の承認を求める書面を作った。フッカーのことは、「現在のような重大な危機に重要な役割を任せるには不適」と述べた。しかし、リンカーン大統領は再度辛抱できず、反対にバーンサイドを解任した。