表废掉文思的谯王爵位，并写信向刘裕道歉。这举动令刘裕对其大感不满，立刻就命江州刺史孟怀玉戒备。义熙十一年（415年），刘裕收杀司马休之在建康的次子司马文宝及侄儿司马文祖，并出兵讨伐司马休之，自加黄钺，领荆州刺史。司马休之则上表刘裕罪状，派兵抵抗；当时雍州刺史鲁宗之自感不被刘裕所容，故与司马休之联结。刘裕前锋徐逵之初战败于鲁轨，众将除蒯恩外皆战死，刘裕大怒。然而当他到时，鲁轨及司马文思率军在悬岸峭壁上列阵，令刘裕难以登岸，胡藩当时就冒险攀登，司马文思等竟不能抵挡，刘裕就乘对方后撤的机会登岸进攻，终击溃司马