于是纵情酒色，又肆意诛杀，残害不少人。同年刘毅攻灭王稚徽，何无忌等又于马头（今湖北公安县东北）击败桓谦，于是乘势进攻江陵。桓振在灵溪与何无忌作战，大败对方，令晋军退还寻阳（今江西九江市）。义熙元年（405年）正月，南阳太守鲁宗之起兵进攻襄阳（今湖北襄阳市），桓振所任命的雍州刺史桓蔚出走江陵。不久刘毅等兵临马头，桓振挟持着晋安帝到江津（今湖北江陵南），派使者要求东晋割让荆、江二州，以换取晋安帝，但为刘毅所拒绝。两日后鲁宗之击败桓振部将温楷，进屯江陵城北十多里外的纪南城。桓振于是留桓谦等守江陵，自率军队进攻