1977年，41岁的赵世曾与女星姚炜相识、相恋，但1979年生下长女赵式芝后，姚炜就离开了赵世曾 姚炜曾说：“他总以为所有女人在他身边都是为了钱，所以我决定什么都不要，抱着女儿离开，搬到父亲的廉租屋住 ”在赵世曾心目中唯一遗憾的就是他心目中的女神台湾第一美女林志玲了