根据黄介（黄媛介）《意中缘序》和董康《曲海总目提要》,林天素之于陈继儒，杨云友之于董其昌，她们虽然初和后者相识相知但最终没有成为其妻妾，李渔知道清军进军杭州后，妇女必然嫁于清兵，实为遗憾，李渔认为二女子都擅长作画，而天下才士擅长作画的没人超过董、陈，于是按照李渔的才子佳人观念，奋笔疾书，作《意中缘》，将林天素配于陈继儒，杨云友配于董其昌