桓玄
胡藩後參桓玄的後軍軍事，隆安三年（399年），時為江州刺史的桓玄出兵消滅殷仲堪及楊佺期，吞併二人分領的荊雍二州，胡藩亦有參與，而羅企生終也沒聽胡藩的勸言，在此事中被殺。元興元年（402年）桓玄擊敗司馬道子父子，入朝主政，胡藩亦隨之先後轉參太尉、大將軍及相國軍事。元興三年（404年），劉裕起兵討伐先前已篡位稱帝的桓玄，擊敗桓楚軍隊並逼近建康（今江蘇南京），桓玄當時就要出走，胡藩就拉住桓玄的馬，說：「現在還有八百個羽林射手，他們都是從荊州跟隨來的，一旦放棄這裏，還怎能再回來呀？」不過桓玄不想再戰，僅以馬鞭指天，接若就出發西上，胡藩在亂中就與桓玄失散了。胡藩及後在蕪湖追上桓玄，桓玄見後十分高興。不過，胡藩在桑落洲之戰中因所乘船艦被燒而掉下水中，鎧甲進滿水之下在水中潛行三十多步才登岸，但因桓玄軍已潰退，追擊的討伐軍斷絕了胡藩追上敗軍的路，唯有返回故家。劉裕早就對當日胡藩對殷仲堪直陳桓玄之事，又知其對桓玄盡節，於是召了他當員外散騎侍郎，參劉裕鎮軍軍事。