但长史裨惠以宣城郡的兵众少而战斗力弱，而且居于附近山野的外族常侵扰，建议桓彝不要现在就举兵支援朝廷，待日后时机适当才举兵。但桓彝厉声拒绝。桓彝及后便派将军朱绰到芜湖讨伐苏峻一支偏军，并成功击破。桓彝不久就领兵到石硊，此时朝廷所派守慈湖的司马流被苏峻军将领韩晃领兵击败，敌军因而长驱直进，并于芜湖击败桓彝。桓彝见宣城郡没有可作坚守的城，于是退守广德。次年，苏峻领兵攻破建康，专掌朝政。桓彝知道后慷慨流涕，并进屯泾县。当时裨惠以附近州郡大部份都投降苏峻为由，劝桓彝假意投降，免被攻打。但桓彝拒绝与苏峻通和，后更遣