Potter ble lånt ut til Southampton i januar 2006 for ca. 4 mnd. I midten av august 2006 ble han lånt ut til Wolverhampton Wanderers for hele sesongen 2006/07. Han gjorde sin debut for Wolves 19. august da han kom inn som innbytter i en 1–0 seier over Burnley FC og hadde sin første kamp fra start 4 dager senere i en uavgjort kamp (som Wolves tapte på straffer) mot Chesterfield FC i ligacupen.