陵亦被晋军收复，桓谦藏匿在沮中。不久桓振袭取江陵，桓谦亦召集部众响应，至闰五月己丑日（6月26日）重夺江陵，并俘虏仍在江陵的晋安帝。当时桓振打算杀害晋安帝，在桓谦竭力劝止下，终保存了晋安帝的性命，又与江陵群臣奉还玉玺给晋安帝。桓谦于是复任侍中、衞将军，加江、豫二州刺史。桓振夺江陵后纵情酒色，肆意诛杀，当时桓谦劝桓振率兵出战，自己留守江陵，但因桓振向来轻视桓谦而没有听从。义熙元年（405年），晋军反攻江陵，桓振留桓谦及冯该守江陵，亲自率兵进攻南阳太守鲁宗之，但当时刘毅已于江陵城外二十里的豫章口击败冯该，桓