和尚书左丞王暹、中书舍人刘师知、殷不佞想要排除陈顼。派遣殷不佞宣伪诏让陈顼回归东府。计划败露，刘师知下北狱赐死，王暹、殷不佞免官，到仲举免为贞毅将军、金紫光禄大夫，回到私邸蛰居。光大元年（567年）国政尽归陈顼，到仲举废归私第后，心中不安。到仲举之子到郁，是陈文帝妹夫，已被任命为南康内史，手下有一批人马。到郁常常乘坐一顶小轿，穿上女人服装，到右卫将军韩子高处密谋。韩子高的军主向陈顼告密、陈顼逮捕韩子高、仲挙、到仲举，送与廷尉。到仲举和到郁都在狱中赐死。享年五十一岁。