Durante su empleo como corredor de valores, en los años 1930, Fleming mantuvo un noviazgo con Daphne Finch Hatton, hija del conde de Winchilsia, Guy Finch-Hatton —un par británico—.