Rundt kl. 17.30 kom Jacksons 26 000 menn løpende og overrasket Howards korps mens de fleste kokte middag. Mer enn 4000 av dem ble tatt til fange uten å ha avfyrt et eneste skudd, og de fleste gjenværende ble spredt. Kun en divisjon i XI Corps gjorde motstand, og det ble også snart drevet tilbake. Innen natten falt på, hadde det konfødererte II Corps rykket mer enn 3 km fremover, innenfor synsvidde av Chancellorsville. De var kun separert fra Lees menn av Sickles korps som var blitt stående der det hadde stoppet sin framrykning samme morgen.