Pennant scoret et hat-trick mot Southampton i mai 2003. Dette ble imidlertid hans eneste ligamål for Arsenal, og han mislyktes i å sikre en fast plass på laget. Arsenal manager Arsène Wenger så ut til å ha mistet tålmodigheten med Pennant og han gikk på flere lån til andre klubber som Watford og Leeds United.