李立三的第二任妻子叫李一纯,李一纯原本是杨开智的妻子。1923年初,杨开智托付李立三,让他护送妻子李一纯回湖南老家,但李立三和李一纯却相互爱上了对方。李一纯回到湖南杨家,领着女儿杨展去了李立三株洲老家,两人不久结为夫妻,生了一个孩子李人俊。李一纯觉得对不起杨开智,就把二妹李崇德许给了前夫作为补偿。
李立三第三任妻子叫李崇善,她是李一纯的三妹。李立三李一纯夫妻去苏联留学期间,李一纯爱上了同路的蔡和森,于是便和李立三离婚了。李一纯觉得自己又愧对李立三,又将三妹李崇善许给了她。但也有书籍记载,李一纯生孩子时,李立三就和她的三妹之间有了腥火。李立三李崇善夫妻生了三个女孩:李竞、李力、谢志佩。
李立三第四任妻子叫李汉辅,也是人们最容易遗忘的一个人。1932年李立三被组织派往苏联远东,在苏联的这段时间,李立三和翻译李汉辅走到了一起,但两人之间并没有孩子,次年李立三前往莫斯科这段婚姻才无疾而终。