Dulles fue el hermano menor de John Foster Dulles, secretario de estado de Dwight Eisenhower, miembro del consejo de Sullivan &Cromwell y nieto de John W.