Fritsch ble olympisk mester i boksing under OL 1920 i Antwerpen. Han vant gull i fjærvekt, i finalen beseiret han sin landsmann Jean Gachet. Det var 17 boksere fra ti nasjoner som stilte i denne vektklassen som ble avviklet i perioden 21. til 24. august 1920.