Il est sélectionné en tant que douzième choix de la Draft 2002 de la NBA par les Clippers de Los Angeles. Après deux saisons avec un maigre temps de jeu aux Clippers, Ely est transféré avec son coéquipier Eddie House le aux Bobcats de Charlotte contre deux seconds tour de draft en 2005 et 2006. Durant ses deux saisons en Caroline du Nord, il est devenu un des joueurs importants du banc de son équipe. Le , Ely rejette une offre des Warriors de Golden State et des Suns de Phoenix pour un contrat de 3 millions de dollars pour rester aux Bobcats.