Tuvo una hija, la actriz Shirley Douglas, y adoptaron más adelante a su segunda hija Joan, que fue enfermera.