檡在咸淳七年（1271年）冬天以全州知州袭封嗣秀王，任吉州刺史。德祐二年（1276年）正月，杨镇奉益王赵昰、广王赵昺到婺州，他和杨淑妃一同前往，到闰三月任命为浙江、福建、广南东三路察访使、安抚及西外宗正。五月益王赵昰即位，改元景炎，是为宋端宗，当时国舅杨亮节掌权，赵与檡以国家要亲近有才贤人经常规劝，于是遭人妒忌，各将领都畏惧他。后来元军逼近浙东，端宗命他到瑞安和方洪防御。元朝廷臣指赵与檡有刘更生的忠心，又有曹王皋的孝道，应该招降任用。景炎元年十一月，元军围攻瑞安，他和方洪二人发誓死守，但一名小校李雄在半