怒逐芸。夫妇遂偕居于鲁璋之萧爽楼，以书画绣绩为生。干隆五十八年（1793年），菜花黄时，偕复客游南园。夏六月，夫妇偕游吴江，夕泊舟于万年桥下。干隆五十九年（1794年），夏七月翁至萧爽楼招芸返家。干隆六十年（1795年），中秋日，夫妇随其母游虎丘。芸始遇憨园。十八日结约为姊妹。嘉庆元年（1796年），憨园为有力者夺去，芸发旧疾。嘉庆五年（1800年），秋八月，复偕客游无隐禅院，归作《无隐图》一幅。芸以十日力绣《心经》一部，而病愈增。冬十二月，家庭构变。二十六日五更，夫妇往无钖东高山华大成家。