帝继位往事的资料，文帝病好后都知道这些事。刘斌等也结为朋党支持为相的义康，图将其推上帝位，遂诬陷尽忠于国的异己者，令其获罪被黜。于是皇帝和义康生了嫌隙。刘义康曾经想让刘斌任丹阳尹，但话未说完文帝就察觉其心意，立即就决定让刘斌任吴郡太守。后来会稽太守羊玄保求还朝，义康又想让刘斌接任，特地去向文帝询问继任人选，文帝当时还未想好，但仓卒之间还是说已决定任用王鸿。而自元嘉十六年秋季起，文帝再也没有去过义康的东府，文帝至此见主相之间的矛盾已经趋于明显，担心会生大祸，于是就元嘉十七年（440年）收杀义康的亲信刘湛、