En 1983 a James, fumador empedernido durante muchos años, se le diagnosticó un cáncer linfático, aunque continuó trabajando, tocando por última vez el 26 de junio de 1983 en Los Ángeles, solo nueve días antes de su muerte en Las Vegas.