爱德华最终退出了海盗生涯,并搬到伦敦居住,并在这里遇见当地地主的女儿特莎。特莎通过她的家族关系为爱德华在安妮女王广场买下一套住宅。1725年,两人成婚并生下一子海瑟姆·肯维。爱德华与前妻的女儿珍妮也融入了父亲的家庭。从海尔森小时候爱德华就开始教他一些刺客的技能,不到六岁就开始教他剑术。爱德华鼓励他的儿子独立思考,学会质疑他人的观点。爱德华对儿子隐瞒了自己过去的秘密,但他曾经的海盗身份无形中疏远了家人与邻居们之间的关系。1733年12月4日,海尔森八岁生日那天,肯维一家正从怀特巧克力厂走回家,在切斯特菲尔德路上被一名强盗袭击。