地点在祁班孙家中，诸人竞以气节相尚，“酒酣耳热，对座客大言，无少顾忌。”顺治十八年夏江阴僧人孔孟文告发钱缵曾通海事，十二月被捕下狱，钱缵曾入狱后,暗中写信，内嘱其妻，以幼子托付给杨越，事洩，杨越亦遭牵连。康熙元年（1662年）六月，与魏耕、潘廷聪等被凌迟于杭州，而祁班孙、杨越流放宁古塔。生前与魏耕、朱士稚合撰有《吴越诗选》二十二卷。