Scott vant en olympisk sølvmedalje i boksing under OL 1948 i London. Han kom på andreplass i den nest tyngste vektklassen, lett tungvekt opp til 80,0 kg. I finalen tapte han til sørafrikanske George Hunter.