干隆三十六年（1772年）以母病辞官归里，主讲安定书院，潜心读书。干隆五十二年（1787年）台湾发生林爽文之乱，闽浙总督李侍尧邀请赵翼入幕府商研；当时台湾总兵柴大纪欲从嘉义突围内渡。赵翼恐弃守城池易引发连锁反应，力劝闽督封还此旨；不久，干隆帝命钦差大臣福康安率兵援台，遂能与守台官兵里应外合。干隆五十七年，再度主持扬州安定书院讲席。嘉庆十九年（1814年）卒，年八十八。
着作.长于文学、史学，其诗名闻于全国，与袁枚、蒋士铨并称“江右三大家”，存诗近五千首，以五言古诗最有特色，亦为“毘