个妹妹，家中排行第四。长兄是香港着名演员导演，演员，编剧许冠文；二兄许冠武是一位商人，曾参与电影和演唱会幕后策划工作；三兄是已故香港着名喜剧演员和歌手许冠英。1971年12月30日与拍拖五年的美菲混血儿女友Rebecca Fleming（Rebu）在美国加州圣地亚哥市的教堂结婚。婚后育有二子，1976年9月3日，长子许怀欣出生；1978年2月14日，小儿子许怀谷出生。许冠杰共有三名孙儿及一名孙女。一对双胞胎（许俊、许朗）及幼孙许梓阳（Tyler）与孙女许芷晨（Leah）。1999年，许冠杰购入大埔康