Fitzgerald ble regnet som en punkpoet. Han var assosiert med punk helt fra 1975, da han prøvespilte, i likhet med hundrevis av andre, for London SS, der innflytelsesrike personer som Mick Jones, Paul Simonon, Terry Chimes, Topper Headon (senere The Clash), Brian James og Rat Scabies (senere The Damned) og Steve New (senere samarbeid med Glen Matlock før Matlock ble med i Sex Pistols) var innom. Fitzgerald skilte seg fra det meste av punken for øvrig og bidro dermed til bredden i kulturfenomenet med poetiske tekster og dikt ved siden av sangene. Blant inspirasjonskildene hans er David Bowie, Ray Davies og Bertolt Brecht.