怀疑的种子一旦种下，就很难消除。
就在赵国即将歇菜的时候，复辟的燕、齐、楚国听说赵国危急，都来救援，张耳的儿子张敖也向北收聚代地的兵力一万多人赶来，都在陈馀旁边安营扎寨，这伙人大眼瞪小眼，却谁都不敢攻击秦军。
项羽杀了宋义之后，费了九牛二虎之力，以少胜多打败了章邯，取得了巨鹿之战的胜利。
由于章邯带兵溃退，各国诸侯的军队才敢攻击围困钜鹿的秦国军队，于是俘虏了王离，秦将涉间自杀身亡，自此钜鹿方才解围。
这时赵歇、张耳才能够走出钜鹿城，几乎已经是强弩之末了，千恩万谢地感谢各国诸侯的救命之恩。
张耳和陈馀相见后，没有久别重逢的喜悦，反而责备陈馀不肯救赵，还一直追问张黡、陈泽的下落。
陈馀听完后十分生气，恼怒地说：“张黡、陈泽的牺牲不应该怪我，按照你们的要求，我派他们带领五千人马试探攻打秦军，结果全军覆没，没有一人幸免。”
张耳不信，认为把他们杀了，却反复多次追问陈馀他们的下落。
陈馀大怒，说：“真是万万没想到，您对我的怨恨，居然是如此之深啊！难道您以为我舍不得放弃这将军的职位吗？”于是一怒之下就解下大将军的印信，直接推给张耳。
陈馀的举动让张耳十分吃惊，他本没有要当大将军的意思，自然也不肯接受。
一时之间气氛僵到了冰点，二人都不再说话，只是互相瞪着，陈馀觉得没劲，于是站起身来上厕所了。
陈馀走后，就有人劝张耳说：“人们常说‘天予不取，反受其殃（意思是上天的赐予机会不珍惜，就会遭到祸殃）’。如今，陈将军把印信交给您，您如果不接受，就是违背天意，肯定是不祥之兆。您赶快接收它吧！”
张耳一听确实有道理，陈馀这人不地道，眼睁睁看着自己被围困却见死不救，现在接收他的部队也算是合情合理。
于是张耳就佩带了陈馀的大印，接收了他的部下。
陈馀上完厕所回来回来，却发现大印已经不见了，手下的部队也被接收了，自己上个厕所的功夫就变成了光杆司令，心里想好你个张耳，我就虚让一下，没想到你还真敢收下，对张耳充满了怨恨，于是冷哼一声，头也不回地走了出去。
由于部队被张耳夺走，陈馀只能独自和他部下亲信几百人离开，一气之下跑到到黄河边的湖泽中打鱼捕猎去了，不再想搭理张耳。
从此，陈馀、张耳就在感情上产生了裂痕。
之后赵歇又回到信都（今河北省邢台市信都区）居住，张耳跟随着项羽和其他诸侯进入关中。
公元前206年2月，项羽封诸侯为王，当时没有张耳的份，赵歇封为代王，陈馀封了三个县。
但是张耳向来交游很广，很多人替他说好话，项羽平常也听说张耳有才能，于是临时分割赵国的土地封张耳做常山王，管理今河北中部一带，以信都为都城，并把信都改名为襄国，赵歇则搬家去代国就封。