忽，不干涉朝廷实务，和朝士无所亲狎，蓄财饮酒为乐。天嘉六年（565年）任期结束，解任丹阳尹。文帝久病在床，不能亲自理政，尚书省的事情都到仲举由裁决。天康元年（566年），转任侍中、尚书仆射。文帝临终，到仲举为顾命大臣之一。文帝驾崩，遗诏安成王陈顼为尚书令辅弼太子陈伯宗统治。到仲举和尚书左丞王暹、中书舍人刘师知、殷不佞想要排除陈顼。派遣殷不佞宣伪诏让陈顼回归东府。计划败露，刘师知下北狱赐死，王暹、殷不佞免官，到仲举免为贞毅将军、金紫光禄大夫，回到私邸蛰居。光大元年（567年）国政尽归陈顼，到仲举废归私