Phillip vokste opp i nærheten av Uniteds gamle treningsbane The Cliff. Når unge Bardsley hadde ferie, var han ofte nede ved banen for å se sine helter trene. Bardsley er den eneste spilleren i den nåværende troppen som har kommet gjennom alle nivåene i Uniteds akademi. Han var åtte år gammel da han startet i Manchester United.