Tuvieron una hija (Dena Kaye) y nunca se divorciaron formalmente, pero Kaye mantuvo comentados romances con Eve Arden y Marlene Sorosky entre otras.