况没有改善，他将会以《镜报》名义上书中央，要求「罢免董建华」。后来据中央消息人士透露，时任国家主席江泽民对徐四民的言论深表不满，认为他打乱了中央在香港的部署，结果江泽民曾召徐四民到中南海加以「训示」。2006年9月，香港多个团体获邀访北京，当被问及陈方安生会否被邀，徐四民断言陈方安生「经常挂住闹」（意指「只爱吵嚷」），没有可能上京。另外，他又直言陈方安生不参选特首是因为「无着数先唔选」（意指「没有利益而不参选」）；而梁家杰参选的原因则是「爱出风头」。
晚年.自2003年退任全国