八年（65年），赵憙接替虞延兼任太尉事务，在官署理事如同实任。后来遇上母丧，上书请求亲自服丧守孝，汉明帝不同意，派使者替他脱掉丧服，赏赐恩宠深厚。赵憙内管宫廷警卫，外行宰相职责，能公正地处理政务，从没有懈怠过。永平十八年（75年）八月，汉明帝去世，汉章帝继位。赵憙又主持汉明帝的丧事，第二次送走死去的皇帝。同年十月，升任太傅，并录尚书事。汉章帝提拔他的儿子七个人做郎官。长子赵代，供职黄门。建初五年（80年），赵憙病重，汉章帝亲自前去探视。五月二十日，赵憙去世，汉章帝前去祭吊。时年八十四岁，谥号为正。