En la dècada de 1950 la seva estrella es va anar a poc a poc apagant i va aparèixer en produccions menors o en papers secundaris en pel·lícules majors. El 1954 va actuar en "El motí del Caine" d'Edward Dmytryk, on tenia com a companys a Humphrey Bogart, Van Johnson i José Ferrer. Aquest mateix any rodarà "La casa número 322" de Richard Quine en la que va compartir protagonisme amb Kim Novak, i on va interpretar un personatge molt similar al de "Perdició" que havia realitzat onze anys abans. El 1955 va ser un dels protagonistes de "The Far Horizons" de Rudolph Maté juntament amb Charlton Heston i Donna Reed, on es recreava l"Expedició de Lewis i Clark".