郗恢同意。不过，三人都不同意，江绩因态度强硬，殷仲堪就让杨佺期代替他出任南郡相一职。而在殷仲堪迟疑之时，王恭却派使者来主动邀约殷仲堪举兵，殷仲堪于是答允。不过却因王恭所驻京口离建康极近，而与他们远道而来的荆州军队不接军势，所以都没有实质行动。不久辅政的司马道子怯于王恭兵势而杀王国宝，殷仲堪才出兵，并派杨佺期进驻巴陵，但不久就因司马道子写信劝止而停止军事行动。隆安二年（398年），王恭再度举兵，殷仲堪再次获邀，这次殷仲堪相信王恭必会成功，更决定出兵分享战果。不过，殷仲堪不善领军，故此将军事全交詑给杨佺期兄