李子方一家信奉基督教，并且是圣公会会众，其妻邓秀卿同样祖籍广东鹤山，是有利银行华经理邓荣陞的长女，尝任香港基督教女青年会董事、中国妇女会董事和妇女兵灾筹赈会副会长兼永远顾问，1960年9月3日逝世，享寿72岁。李子方夫妇共育有六子三女，分别名李福杖、李福和、李福泰、李福权、李福逑、李福培、李慧贤、李慧娟和李慧娴。李子方的二子李福和曾任东亚银行主席和行政立法两局非官守议员；另五子李福逑是港府早期的华人政务官，是开埠以来首位出任社会福利署署长、社会事务司和民政司的华人，并尝任行政立法两局官守议员。李福逑之