招来不少闲言蜚语，使他的名声有所受损。当中，曾在来亨见过他们的陆军军官约翰·摩尔（John Moore，后为爵士），就直指纳尔逊与艾玛一起的亲密场面令人感到「相当可悲」（It is really melancholy）。至于在返国后，纳尔逊虽然获得英皇乔治三世的接见，但乔治三世向来标榜自己重视婚姻和家庭，所以对传出婚外情的纳尔逊显得十分冷淡，不少上流贵族及士绅得悉后群起仿傚，对纳尔逊採取回避的态度。纳尔逊在1800年回到英国后，他与艾玛的婚外情无可避免地导致他与发妻法兰西斯的感情破裂。法兰西斯虽然没有与