Procedente de Fresno State Bulldogs, fue seleccionado por Los Angeles Clippers en la 12º posición del Draft de 2002. Tras dos temporadas en los Clippers jugando pocos minutos, Ely fue traspasado junto con Eddie House el 14 de julio de 2004 a Charlotte Bobcats ha cambio de dos segundas rondas de draft de 2005 y 2006. En los dos años que jugó en los Bobcats, su aportación desde el banquillo cobró más importancia que el papel que realizaba en los Clippers. El 2 de octubre de 2006 renovó un año con los Bobcats por 3 millones de dólares, rechazando ofertas de Golden State Warriors y Phoenix Suns. El 13 de febrero de 2007 fue traspasado a San Antonio Spurs a cambio de Eric Williams y una segunda ronda de draft de 2009, donde ganó el anillo en las Finales de 2007 ante Cleveland Cavaliers.