玫有过恋情，但两人先后失踪及死亡，最后卫斯理娶白素为妻；曾先后拜北派武术大宗师王天兵和南拳王扬州疯丐金二为师学习武术，故一身武艺极为高强。卫斯理约出生于1930年代，于江南地区长大，极可能籍贯和成长地是杭州，《卫斯理系列》没有直接叙述其由中国内地移居香港的经过，在系列第一本小说《钻石花》出场时，他已经定居香港。 卫斯理随身戴着一枚紫晶戒指，这是他的个人标志；围住腰际的并不是皮带，而是一条白金丝软鞭。曾用来对付虎鲨（《钻石花》）和大蜜蜂（《蜂云》）。
家庭.卫斯理出生在富有大家族