I mellomtiden overså Durutte angrepet som hans 1 700 soldater i 2. brigade helt til høyre på den franske flanken skulle utføre. Rundt klokken 1330 sendte han sine tropper inn i den lille senkningen foran Papelotte og La Haye, dekket av 18 kanoner fra beredent artilleri og Jacquinots kavaleri. Linjen med franske tiraljører trakk seg tilbake under den britisk-allierte beskytningen og Durutte forsterket den raskt med bataljoner i åpen fremrykking. Han sendte også frem et batteri beredent artilleri for å angripe Smohain. To av de franske bataljonene inntok raskt Papelotte og seieren syntes å være nær. På dette tidspunktet red Durutte tilbake til bakkekammen og fant til sin misnøye ut at 1. brigade var slått ut og området på hans venstre flanke var fullt av britisk kavaleri. Med den nederlandsk-belgiske brigaden under kommando av Charles Étienne de Ghigny i fremrykking nedover mot de, beordret han soldatene i 2. brigade å gjøre en rask retrett dekket av en av Jacquinots regimenter. Brigaden klarte å trekke seg tilbake i en bataljon karré (firkantet formasjon). Troppene jaget deretter de Ghignys lette kavalerister med et nærliggende fransk artilleribatteri.