Do National Basketball Association trafił bezpośrednio po szkole średniej, będąc wybranym z numerem 18 w drafcie NBA 2004, przez New Orleans Hornets. Stał się wówczas dziewiątym graczem, który trafił do NBA prosto ze szkoły średniej. W swoim pierwszym sezonie, Smith notował średnio 10,3 punktu, 1,9 asysty oraz 2 zbiórki na mecz.