但谢晦辞让爵位。谢晦前往荆州之前，问蔡廓说：“吾其免乎？”，蔡廓告诉他：“废昏立明，义无不可，但杀人二昆，而以北面，挟震主之威，据上流之重，以古推今，自免为难耳。”谢晦到江陵后交结宋文帝的心腹王华，希望免于灾劫，又将两个女儿嫁给彭城王刘义康及新野侯刘义宾。其时宋文帝有意诛杀他及徐羡之和傅亮，故此借北伐为由修治船舰，不过当时朝中很多人都反对北伐，朝廷对于北伐问题的处理手法亦与惯常方式不同，几乎令诛杀大臣的密谋败露。不过至元嘉三年（426年）黄门侍郎谢㬭命人向谢晦报告皇帝要诛杀他们时，谢晦仍然不相信，更向谘