王祖賢
林建岳於1980年與童星出身的臺灣演員謝玲玲結婚，育有5個兒女，包括一對龍鳳胎及兒子林孝賢（1981年7月15日出生）， 而且公公婆婆也十分喜欢这位媳妇， 但林建岳始終緋聞不斷，甚至为了追求王祖賢而提出离婚，1993年林谢二人签署分居协议，1995年正式离婚。但林家父母非常反對林建岳的这份离婚， 不仅经常告诉媒体“宁可不要这个儿子、也要这个儿媳妇！”， 也经常公開批評王祖賢， 尤其是林母余寶珠的那句「就當兒子嫖妓！」(粤语原文: 我当我个仔叫鸡！)， 震惊一时， 使王祖賢形象受到重创，事业刹那间滑至谷底， 被迫出走港岛， 其後移居加拿大。