甯看不过眼，劝孝武帝贬黜他，但王国宝却反诬陷范甯，令孝武帝无奈贬他到豫章任太守。如此司马道子一党的权势就更盛。其中因为贿赂而得亲近司马道子的赵牙和茹千秋，一个耗费巨资为司马道子宅第建筑山水设施，另一个更卖官贩爵，聚敛了过亿钱财。司马道子又恃着皇太妃李陵容宠爱，有时因酒意而有失礼之事，令孝武帝难以忍受，只因皇太妃之故而没有废黜他。孝武帝认为司马道子不是治国之能臣，当时又因王国宝与孝武帝亲近的王珣等人不和，孝武帝于是以外戚王恭为青兖二州刺史、殷仲堪为荆州刺史、郗恢为雍州刺史，以他们作为外援抗衡司马道子的势力