Williams comenzó jugando en el Montgomery Junior College, donde en su temporada sophomore promedió 26 puntos y 17 rebotes por partido, hasta que se cambió a la Universidad de Georgetown.