Im allgemeinen Rückzug ab dem Herbst 1943 bis zum Sommer 1944 ging die Division über die Orte Brjansk, Prypjat, Babrujsk und Kowel zurück. Während der sowjetischen Sommeroffensive ab dem 22. Juni 1944 war sie der Kern einer hastig zusammengestellten Kampfgruppe unter dem Befehl von Generalleutnant Dietrich von Saucken, mit der bei der Ortschaft Baryssau die Einkesselung der 4. Armee verhindert werden sollte. Aufgrund der Übermacht der Roten Armee konnte diese Aufgabe nicht erfüllt werden. Der Verlust von Minsk am 3. Juli war aufgrund der katastrophalen militärischen Gesamtsituation der Heeresgruppe Mitte nicht zu verhindern. Die "Kampfgruppe Saucken", die zu diesem Zeitpunkt im Wesentlichen aus der 5. Panzer-Division, der schweren Panzer-Abteilung 505 und der 170. Infanterie-Division bestand, musste sich vor der Übermacht der 3. Weißrussischen Front von der Beresina nach Molodetschno zurückkämpfen.