Dassin pasó su infancia en Nueva York y Los Ángeles; siendo aún niño, acompañó al exilio en Europa a sus padres, víctimas de la política anti-comunista del senador Joseph McCarthy.