没有请求辞职，太宗也不忍罢免他。直到举行郊祀（于郊外祭祀天地，南郊祭天，北郊祭地）后，才以石熙载接任枢密使，晋升他为右骁卫上将军。太平兴国七年十二月二十三日庚辰（983年1月9日），楚昭辅卒，年六十九，赠侍中。楚昭辅是着名收藏家，藏有韩滉《牛图》以及王维山水画。他性格勤劳耿介，人们不敢以私事拜托他。但又很吝啬，皇帝前后赐予他钱财万计，他统统收藏起来，曾经带宾客故旧到他的藏宝室中观看，自得的说：“我虽无汗马功劳，只是风云际会才到这个地步，这些财物我暂时替国家守着，以后当贡献给皇帝。（吾无汗马劳，徒以际会得