汾州刺史，治郡七年，政绩卓越，授鸿胪卿兼左右威远营使。大历十四年十一月五日（779年12月17日），检校左散骑常侍、兼梁州刺史、御史大夫、山南西道节度使。建中三年11月1日（782年12月13日），检校工部尚书、兼御史大夫、山南东道节度使。李希烈反，德宗移幸梁州，兴元元年（784年）二月，耽命行军司马樊泽奏事于行在。泽既复命，大宴诸将，忽有急牒，称以泽代耽为节度使，召耽为工部尚书，耽阅毕，宴中面不改色。散会后方召泽，告以继任为节度使，命将吏入拜，耽即时启程；牙将张献甫有异议，耽以献甫随行，众心乃安。不久