后，以赵相国身份随项羽入关，因此被封为常山王，王赵故地。不久陈馀来攻，张耳不敌，逃归汉王刘邦。汉分兵北略赵、代等地。张耳因与刘邦素有交情，表面为韩信副手，实为监军。韩信占领赵国后，上书刘邦请立张耳为赵王，刘邦欣然从之。次年，张耳病故，其子张敖继立。白登之围后，刘邦过赵，张敖执子婿礼甚恭，而刘邦却甚倨傲。赵相国贯高对刘邦的无礼深为恼怒，遂八年冬（前200年）发生了“贯高谋反事件”。九年冬十二月，贯高谋反事件被发觉，捕赵王下狱。后查实赵王确实并未参与此事，但被连坐，仍除其国，废为“宣平侯”。吕后称制，封