En 1942, los periódicos lo acusaron de comunista, y al año siguiente Joan Barry tuvo una hija y denunció al actor por no querer reconocer la paternidad de la misma.