Mitte der 1970er schaffte es Spencer alles in allem nicht, sein Potenzial auszuschöpfen, was auch daran lag, dass sein langjährig benutzter Queue bei einem Autounfall 1974 zerstört worden war. Das beeinflusste seine Spielweise erheblich. Zwar konnte der Queue repariert werden, doch Spencer fühlte sich immer unwohler mit seinem alten Spielgerät. Erst nach dem Wechsel zu einem neuen Queue, der als einer der ersten Queues von Profispielern in zwei Hälften zerlegbar war, verbesserte sich seine Form wieder: Bei der Weltmeisterschaft 1977, der ersten im Crucible Theatre, zog er wieder ins WM-Finale ein, wo er mit einem Sieg über Cliff Thorburn zum dritten Mal Weltmeister wurde. Dieser Erfolg führte ihn auf Platz 2 der neu eingeführten Snookerweltrangliste, die sich in ihren ersten Jahren nur aus den Ergebnissen der Weltmeisterschaft berechnete. Die folgenden zwei Saisons verliefen aber wieder nach dem alten Muster: mittelmäßige Ergebnisse bei der Weltmeisterschaft, mehrere Finalteilnahmen bei kleineren Turnieren. Bei einem solchen Turnier, dem Holsten Lager International 1979, spielte er ein Maximum Break. Es wäre das erste offiziell anerkannte Maximum Break bei einem Profiturnier gewesen, doch diese Anerkennung blieb aus, da die Taschen des Snookertisches größer als erlaubt waren. Zusätzlich hätte es das erste im Fernsehen übertragene 147er-Break sein können, hätten die Fernsehtechniker nicht gerade ihre Pause gemacht. Des Weiteren hatte Spencer auch Pech in Hinsicht auf eine mögliche zusätzliche Prämie, denn das Turnier war eines der wenigen Turniere jener Zeit ohne eine Extra-Prämie für ein Maximum Break. Ironischerweise sollte Spencer drei Jahre später der Gegenspieler von Steve Davis sein, dessen Maximum Break beim Classic 1982 all jene historische Marken setzen sollte. Spencer selbst empfand sein Pech als Schicksal. Auf der Weltrangliste wurde er zwei Saisons in Folge auf Platz 4 geführt.