En av de siste som sluttet seg til Kilburns var gitaristen og organisten Chaz Jankel, og etter at bandet ble opplyst, fortsatte Dury og Jankel å skrive sanger sammen. Jankel var sterkt inspirert av svart amerikansk musikk, særlig funk, noe som ga musikken deres en særlig dimensjon. Nærmest ved en tilfeldighet kom de i kontakt med Stiff Records, og sammen med Norman Watt-Roy på bass, Charley Charles og John Turnbull på gitar, begge fra bandet The Loving Awareness spilte de inn singelen «Sex & Drugs & Rock & Roll». Singelen, som ble gitt ut under Durys navn og der han selv bidro med vokal, ble ingen storselger, men den fikk gode kritikker, og punkens inntog på det britiske markedet bidro til at den fikk en viss utbredelse. Tittelsangen regnes ofte også som opprinnelsen til dette begrepet, som siden har etablert seg som betegnelse på en viss rock'n'roll-livsstil.