Polisen i södra Wales har bekräftat att ärendet är avslutat och att de tre klagande har fått veta det.
Kraften sa att den har informerat Operation Hydrant, som övervakar anklagelser om tidigare sexuella övergrepp mot barn.
Lord Tonypandy, som föddes i Port Talbot, dog i cancer 1997 i åldern 88 år.
Därefter känd som George Thomas, var han arbetarledamot i Cardiff från 1945 till 1983.
Den metodistiska predikanten var också minister för Wales från 1968 till 1970 och var Commons talman mellan 1976 och 1983.
Anklagelser om sexuella övergrepp mot barn gjordes mot honom för fyra år sedan.
En man, som nu bodde i Australien i femtioårsåldern, påstod att lord Tonypandy hade våldtagit honom sexuellt i Cardiff när han var nio år medan han bodde hemma hos pojkens föräldrar på 1960- och 1970-talen.
Andra anklagelser mot honom var att han på 1960-talet utsatte en 16 eller 17-årig pojke för sexuella övergrepp på ett tåg mellan Newport och London.
Det påstods också att han på ett opassande sätt rörde någon på ett tåg från London till Aberystwyth 1959.
På onsdag sa South Wales-polisen att utredningen har avslutats och att inga ytterligare åtgärder skulle vidtas.
"Dessa påståenden har undersökts proportionellt av South Wales Police i linje med nationell vägledning," det sade i ett uttalande.
"Kraften tar alla anklagelser om sexuella övergrepp på allvar oavsett när det påstådda brottet ägde rum och uppmuntrar alla offer för sexuella övergrepp att träda fram, i vetskap om att de kommer att bli lyssnade på och deras anklagelser tas på allvar."
Vänner och människor som kände lord Tonypandy har tidigare sagt att de tyckte att anklagelserna var svåra att tro på.
En utredning om sexuella övergrepp som gjorts mot den före detta talmannen i underhuset Viscount Tonypandy har avslutats.