期间狎游对象多为娈童。万历十三年（1585年）因 “风流放诞”、“与所欢小史衣红衣，并马出凤台门”被罢官，隐居顾渚山中，“与二三同志，典籍为粻，翰墨为酒”。晚年贫困潦倒。
着作.编有《元曲选》，多改原文，说教意味浓厚，如改窜《牡丹亭·冥誓》有眉批曰：“‘前日为柳郎而死，今日为柳郎而生’，正临川所谓天下有情人也。”自诩是“戏取诸杂剧为删抹繁芜，其不合作者，即以己意改之，自谓颇得元人三昧”，着有《负苞堂诗文选》行世。