しかし、1909年(宣統元年)に徐の後任として錫良が就任すると、倪は汚職を理由に罷免されてしまった。