吕以辇与他的大学同学张学莲于1962年结婚，张学莲是北京理工大学应用数学系教授、副系主任，现已退休