怀玉戒备。义熙十一年（415年），刘裕收杀司马休之在建康的次子司马文宝及侄儿司马文祖，并出兵讨伐司马休之，自加黄钺，领荆州刺史。司马休之则上表刘裕罪状，派兵抵抗；当时雍州刺史鲁宗之自感不被刘裕所容，故与司马休之联结。刘裕前锋徐逵之初战败于鲁轨，众将除蒯恩外皆战死，刘裕大怒。然而当他到时，鲁轨及司马文思率军在悬岸峭壁上列阵，令刘裕难以登岸，胡藩当时就冒险攀登，司马文思等竟不能抵挡，刘裕就乘对方后撤的机会登岸进攻，终击溃司马休之的军队，攻下江陵，司马休之及鲁宗之北投后秦。刘裕在消灭司马休之后获剑履上殿、