从此二人失和。汉高祖元年（前206年），项羽自立为西楚霸王，此时张耳同各路诸侯入关中。项羽素闻张耳之名，乃分赵地北部，立张耳为常山王。因为先前张耳、陈余有隙，陈余闻知大怒，对别人说：“张耳与我功劳相等。今张耳为王，我却封侯，项羽对我不公。”陈余使门客夏说说服齐王田荣出兵，以三县之兵，袭击张耳。汉高祖二年（前205年），张耳败走，投靠汉王刘邦，陈余立代王赵歇为赵王，自立为代王，自己不赴代国，在赵国以太傅的身份辅佐赵歇。汉王刘邦招降陈余，陈余要见到张耳的首级才肯降，刘邦斩了一个面貌相似张耳的人，用其首级