Williams zadeklarował się do wzięcia udziału w drafcie 2005 od razu po skończeniu szkoły średniej i został w nim wybrany z 45. numerem przez Philadelphia 76ers. W sezonie 2011/12 zajął drugie miejsce w głosowaniu na najlepszego rezerwowego NBA.