Durante su matrimonio Harrison tuvo varias aventuras amorosas, incluyendo una con la actriz Carole Landis, la cual se suicidó en 1948 como consecuencia de su relación con el actor.