La retraite reprend en direction de Smolensk et le régiment doit brûler une partie de ses bagages devenus intransportables par suite de la perte de nombreux chevaux. Au cours de la bataille de Krasnoï, les lanciers se heurtent à des cosaques parmi lesquels ils font quelques prisonniers mais perdent néanmoins ce jour-là. Le , le régiment traverse la Bérézina et perd lors de l'affrontement qui s'ensuit. Le , un renfort de arrivé à Smorgoni sous les ordres du colonel Stokowski, ainsi que quelques chasseurs à cheval de la Garde et lanciers du , escortent l'Empereur jusqu'à Rovnopol, laissant en chemin les deux tiers de leur effectif. Le reste du régiment escorte le trésor impérial et atteint Vilna le . Entré en Russie avec , le régiment ne compte plus que vers la mi-décembre et seulement 374 hommes avec 270 chevaux à la fin du mois.