Williams ble olympiske mester i basketball under OL 1952 i Helsingfors. Han var med på det amerikanske laget som vant basketturneringen. Det var tredje gang som basketball sto på det olympiske programmet, tjuetre lag deltok i turneringen som ble avviklet i perioden 14. juli til 2. august 1952. USA vant semifinalen over Argentina med 85-76 og i finalen vant de med 36-25 over Sovjetunionen. Williams spilte alle åtte kampene i OL-turneringen.