En kneskade gjorde at Idowu ikke kunne delta i 2003. Han var tilbake til Sommer-OL 2004, der han hoppet 17,33 i kvalifiseringen, som var det fjerde lengste hoppet i kvalifiseringen. I finalen mislyktes han grovt og fikk ikke et eneste godkjent hopp, og endte på sisteplass.