Favors jest absolwentem "South Atlanta High School", grał w lidze NCAA broniąc wówczas barw uniwersytetu Georgia Tech Yellow Jackets z rodzinnej Atlanty. W 2010 roku zrezygnował z trzech ostatnich lat studiów, na rzecz zgłoszenia się do Draftu NBA. Został wybrany w pierwszej rundzie z numerem 3 przez New Jersey Nets.