进升为定江军承宣使、崇信军节度使，因年岁劳苦转太尉，拜开府仪同三司。次年，领殿前都指挥使，献出本军的酒方十六所，积钱十万缗、银五万两以助军用，宋高宗下诏奖赏。上疏告老，于是以万寿观使奉朝请。隆兴二年（1164年），进少保致仕。不久金军再次侵犯淮河，宋孝宗下诏任命赵密再为殿前都指挥使。之前，金军声言航海来犯，朝论选从官视察水师，撤去禁旅防守，赵密不为动摇，正如所料。宋金和议达成，赵密罢为醴泉使。干道元年（1165年）九月，致仕。卒，时年七十一岁。赠少傅。