Cole spielte für verschiedene englische Jugendauswahlmannschaften und nahm 1999 mit der U-20-Nationalmannschaft an der Junioren-WM in Argentinien teil. Obwohl dort mit Stuart Taylor, Peter Crouch, Andy Johnson und Matthew Etherington bekannte Namen in den eigenen Reihen standen, landete die Mannschaft in der Gruppenphase auf dem letzten Platz und schoss bei den drei Niederlagen nicht ein einziges Tor. Für die U-21-Nationalmannschaft lief er in vier Spielen auf und schoss dabei einen Treffer.