Lü Zuqians forfedre stammet fra det som i dag er provinsen Shanxi. Da Song-hoffet flyktet til Hangzhou 杭州 og grunnla det sørlige Song-dynasti 南宋 (1127-1279) slo Lü Zuqians bestefar Lü Haowen 呂好問 seg ned i Wuzhou 婺州 (det moderne Jinhua 金華 i Zhejiang). Lü Zuqians filosofiske skole kalles dermed vekselvis 呂學, 婺學, eller 金華學派. Mange fra slekten Lü var høye embedsmenn under Song-keiserne, som Lü Mengzhong 呂蒙正, Lü Yijian 呂夷簡, Lü Gongbi 呂公弼, Lü Gongzhu 呂公著, og Lü Xizhe 呂希哲, og de og mange andre nevnes i de gamle kilder.