Dizzy Gillespie slutta på ungdomsskolen, som mange andre, for å jobbe på en bomullplantasje i depresjonstida. I 1935 flytta han tilbake til Philadelphia for å være sammen med mora. Etter noen dager fikk han jobb i Frankie Fairfax band der han fikk kallenavnet sitt: Dizzy.