过了几年，燕荣与元弘嗣的矛盾日益加深，燕荣就把元弘嗣投入监狱，断绝元弘嗣的食粮。元弘嗣饥饿，抽棉絮加上水咽下去。元弘嗣的妻子到皇宫门口喊冤，文帝派考功侍郎刘士龙去调查，回报燕荣为政暴虐，贪赃枉法，声名狼借。文帝将燕荣召回，命他自尽。仁寿三年（603年）八月初三，文帝将幽州总管燕荣赐死。元弘嗣代替燕荣执政，他比燕荣还要酷虐。之前，燕荣家中寝室无故有蛆虫数斛，从地里突起而出。不久，燕荣死在蛆出之处。有子燕询。燕询的儿子燕敬嗣，唐鄂郓二州刺史、昌平郡公；燕询的女儿是唐太宗的燕德妃。