在家乡与同乡吴实师（吴书伊）结婚，1950年举家移居香港。初时居住在母亲家里，1952年参予电影工作。她丈夫擅长吹喇叭，先后在「金凤池舞厅」及「东方舞厅」担任乐队喇叭手。1956年，时年31岁的鹭芬与41岁的吴实师育有三女一子，被吴实师斩伤头部重伤，昏迷不醒，须留院医治，事后她丈夫被起诉非法伤害他人身体。