求提升襄州为大都督府，德宗无奈答应，遂成为汉南重要割据势力。累迁至左仆射、平章事、燕国公。时常不奉诏旨，擅自进兵南阳，朝廷几为之旰食。宪宗时，藩镇势力较弱，稍戒惧，以第四子于季友请求尚公主。宪宗以长女永昌公主下嫁。在其第二子于方屡次劝谏下，才入朝面圣，拜司空、平章事，元和八年，因其子于敏被奴仆王再荣告发杀人，贬为恩王傅。同年十月改授太子宾客。十三年八月卒，赠太保，谥曰“厉”。后其子于季友向唐穆宗求情，改赐谥曰“思”。