Sviktende helse tvang Byron til å legge racing på hylla i 1951, men han var fortsatt aktiv i miljøet. Han arbeidet med Briggs Cunningham, som forsøkte å utvikle en amerikansk sportsbil som kunne vinne Grand Prix-løp, før han ble manager for et Corvette-lag med samme mål. Ingen av prosjektene lykkes, men Byron holdt seg til sportsbiler. Da han døde av hjerteattakk på et hotellrom i Chicago den 11. november 1960, i en alder av 45, ledet han et lag i konkurransen .