El 17 de septiembre de 2005, en Phoenix, Arizona, Chávez sufrió una derrota por KOT ante el poco conocido Grover Wiley, su esquina le ordenó retirarse antes del comienzo del quinto asalto, debido a una lesión de tiempo atrás en su mano derecha, pero periodistas mediáticos aducen esa caída,a la adicción ya conocida del ídolo mexicano (cocaína) quien con el tiempo afirmo el mismo Julio César, que su adicción a la cocaína era tan fuerte que ya no veía un boxeador en el ring sino tres, tras el combate con Grover Wiley, Chávez le dijo a su promotor, Bob Arum, que ésa vez fue, sin duda, su retiro del boxeo.