不出都城，德宗以耽善射，特许游猎郊甸。贞元2年7月22日（786年8月24日）加东畿汝南防御使，同年二年九月十一日（786年10月7日），改检校左仆射、兼滑州刺使、义成军节度使。贞元九年五月二十七日（793年7月9日），征为左仆射、同中书门下平章事；顺宗即位，贞元21年3月19日（805年4月21日）加检校司空，守左仆射、知政事如故，时王叔文用事，耽移疾请退，不允。宪宗永贞元年10月2日（805年10月27日），薨于长安光福里邸第，享寿76岁。废朝4日，赠太傅，谥曰元靖，葬长安高阳原。耽居相位前后1