因梁州刺史杨亮及益州刺史周仲孙抵抗失败并撤退后被前秦所攻佔。太元元年（376年），桓豁升任征西大将军、开府，桓豁辞让但不获准许，桓豁于是追溯373年蜀地失守之事，以自己「威略不振，所在覆败」再上书辞让开府。同年，前秦派大军进攻前凉，桓豁与其弟车骑将军桓沖合作，派督护桓罴、江州刺史桓石秀及兖州刺史朱序等进扰沔汉一带地区，以图以此纾缓前凉的压力，但前凉终被前秦所灭，各人亦罢兵。因为前凉覆亡，朝廷派出中书郎王寻之前往荆州与桓豁见面，谘询边境抵抗前秦之事。桓豁于是于太元二年（377年）表右将军毛穆之为监沔中军事