Cet officier, quittant alors sa brigade avec regret, vient s'enfermer dans Torgau, ville de âmes, d'où il parait que l'armée française va s'éloigner, d'après les instructions données par le maréchal. Le baron de Villeret s'occupe avec activité de mettre la place en état de défense. Napoléon ayant conçu le projet de livrer une bataille décisive à Leipsick, veut faire de Torgau le dépôt général de son armée et, en conséquence, il y envoie ses réserves et tous ses malades. Le commandement de cette place devient alors trop important pour un général de brigade, et le comte de Narbonne, aide de camp de Bonaparte, en est nommé gouverneur. Le général Brun reçoit dans le même temps des lettres de service pour commander, sous M. de Narbonne, la garnison de Torgau. Bientôt tous les malades de la Grande Armée se trouvent réunis dans cette ville. Le typhus le plus terrible s'y développe, et la mortalité devient chaque jour de plus en plus effrayante. Le comte de Narbonne succombe d'une chute de cheval le , et est remplacé par le général Dutaillis qui se trouve dans la place. Sous ce nouveau gouverneur, le général Brun continue de donner ses soins à l'approvisionnement et à la défense de Torgau. Ici l'histoire particulière du général Brun va se trouver confondue avec celle d'une garnison qui, par un courage et un dévouement héroïques, se couvre d'une gloire immortelle. Tous les hôpitaux se trouvant encombrés, les églises, les édifices publics et les maisons particulières sont convertis en dépôts de malades. La mort marque constamment de 250 à 300 victimes par jour depuis le jusqu'au janvier, et une odeur cadavéreuse se manifeste sans cesse dans tous les quartiers de la ville.