处回的朋友凤翔节度使侯益，侯益归蜀，但很快又因害怕而入朝后汉。王处回因身为勋旧，变得专权贪纵，卖官索贿，四方有馈赠的，先送礼给王处回，然后才送给朝廷。儿子王德钧（或作王德筠）也骄横，多行不法。广政十一年（948年）七月，高级宰相司空兼中书侍郎同平章事张业因腐败和被控谋反被杀，有人认为王处回也会被杀。但孟昶不忍杀王处回，建议他回家。王处回惶恐辞职，被罢黜为武德军（即东川）节度使兼中书令。八月，王处回告老，以太子太傅致仕。赵廷隐也致仕，至此后蜀故将旧臣皆退，孟昶开始亲理政事。王处回致仕后，孟昶认为枢密使权重