Za druhé světové války v letech 1939–1941 jako voják wehrmachtu bojoval na západní i východní frontě, kde byl raněn. Roku 1942 byl z armády vyloučen kvůli směrnici zakazující službu všech Romů a poté deportován do koncentračního tábora Neuengamme, kde byl nucen navzdory své podvýživě a vysílení každý večer podstupovat boxerské souboje s tamními příslušníky SS. Trollmannovi spoluvězni fingovali jeho smrt a zajistili mu přesun do koncentračního tábora Wittenberge, kde však byl opět poznán a roku 1944 ubit dozorcem Emilem Corneliem. Jeho mistrovský titul z roku 1933 byl Německou profesionální boxerskou federací uznán roku 2003.