Lovell vant en olympisk sølvmedalje i boksing under OL 1936 i Berlin. Han kom på andreplass i den tyngste vektklassen tungvekt, over 79,4 kg. Lovell vant de tre første kampene men tapte finalen til Herbert Runge fra Tyskland. Det var 17 boksere fra 17 nasjoner som stilte i den tyngste vektklassen som ble avviklet i perioden 10. til 15. august 1936.