Etter sjuårskrigen forfalt slottet, og ble inntil 1815 brukt som prøyssisk kaserne. Etter Napoleonskrigene kom Torgau under Preussen, men ved grunnleggelsen av Fristaten Sachsen ble byen igjen saksisk.