Williams se comprometeu a jogar na Universidade da Geórgia mas acabou se declarando para o Draft da NBA de 2005. Ele terminou sua carreira como o segundo maior artilheiro de todos os tempos na história do basquete colegial da Geórgia.