接下来几日，张参以生力军对刘秀军发动了多次反攻，都被刘秀挡住了。
但是刘秀军也到了精疲力竭的地步，逐渐不支，甚至越来越难以维持阵型，所剩的兵力只有不到三万。
刘秀当机立断，下令后撤。这个过程中几乎没有发生混乱，刘秀虽然对于部队练兵时间不长，但军队纪律已经形成。
张参见刘秀军后撤，果断下令追杀，很快就攻陷了刘秀的辎重营。
刘秀留下的辎重营十分富裕，是这几个月在巨鹿，信都两郡的所有斩获，光是装军乐器的辎重车就被俘获了数乘，那金银珠宝，粮食兵甲就更多了。
但是这时候军纪的差异就体现出来，面对巨额的辎重，缺少名帅训练的张参军就必然很难控制纪律，所有的士兵都放弃追杀刘秀，转而开始抢夺辎重。
这时候，刘秀立即吹响了号角，早已准备好的二万骑兵从一旁的树林中冲了出来。
因为抢夺辎重，张参军的阵势大乱，完全不具备防备骑兵的条件，混乱之中遭到骑兵践踏、蹂躏、驰射，如同海啸突至，打得张参军的秩序轰然崩坏。
而刘秀见张参军的阵势被己方骑兵冲散，立即重整步军阵型，掩杀而上。
大败，前所未有的大败，没有阵型的军队，在战场上只能沦为待宰的羔羊，张参军将士纷纷向着巨鹿方向跑去。
这时，张参军的兵力优势，反而成为了累赘，被步骑夹攻，挤压到狭小的空间中自相残杀。
刘秀指挥着大军追杀了十多里，才罢休。
骑兵追杀着溃兵来到巨鹿，想要跟在溃兵后面抢占巨鹿城门，但是巨鹿守将王饶竟然下令不准管溃兵的死活，坚决不能开门。
刘秀军骑兵这才作罢，休兵回营。
三月二十四日
刘秀领着大军抵达巨鹿，南栾一战的结果已经传扬了出去，以少胜多，绝境逢生，这是天将啊。
但是巨鹿守将王饶坚决弹压了城内，且拒不投降，不耐刘秀只好攻城。
但是就是这数千人守着的巨鹿，在王饶的指挥下，又阻挡了刘秀多日。
这时，刘秀派去攻打信都的军队回来了，加上在南栾之战收降的降兵，刘秀的兵力已经来到了十万。
苏谨建议道：“王饶善守，长久的在巨鹿浪费时间，将士们一定会疲敝，不如调集大兵精锐，绕过巨鹿，进攻邯郸。只留下一小部分人监视王饶，若是刘子舆伏诛，王饶不战而自服矣。”
刘秀认为此计甚妙，于是命令将军邓满领兵二万，监守钜鹿，自己带领其余兵马进发邯郸。
即使王饶看见了刘秀大军撤走，往邯郸而去，但是自己就只有几千人，出了城恐怕毛都不剩了，只能眼睁睁的看着刘秀走。
三月三十日
刘秀指挥着大军一路南下，凭借着南栾之战的名声，一路上无比顺利，沿途县乡听闻刘秀大兵将至，尽皆破胆，一路上降附如雨。
等刘秀抵达邯郸北城时，麾下将士已经有了十五万，而冯异指挥着数万人，正在一路攻向渤海。
刘秀十五万大军在北门，权练的五万白军在西门，谢躬的五万汉军在南门，而东门则是白渠水，邯郸已成孤城之势。
再加上柏人的李育被邓禹和吴汉领着数万兵马，南北夹击剿灭于任县，冯异在不断攻取赵国剩余的郡县，不出月余，赵国就只剩下了邯郸一座孤城。
五月六日
冯异夺取赵国东面，黄河以北剩余的所有领土，谢躬也派出一万人将清河郡拿下，邯郸已成孤城。
即使邯郸城内还有十万人，但是人心思变，士气低下。
五月八日
刘子舆麾下少傅李立被刘秀策反，大开北门引入刘秀军入城。刘子舆半夜逃走，但是被刘秀的士兵所斩杀。
由此，被围了将近五个月的邯郸终于被刘秀攻下，而随着赵汉君主刘子舆的死亡，赵汉领土的消失，代表着赵汉彻底覆灭。
由于刘秀先一谢躬一步入城，所以邯郸由刘秀实际占领，谢躬只好退回梁期县驻扎。
而白国援军在接受了刘秀的犒赏后，也匆匆告辞，回到白国，因为白国传来消息，上党郡大族王氏，联合三个所属县的豪强举事，反对白氏的严厉统治。
在朝歌的驻守的数万精锐军队被调去平定叛乱，此时朝歌兵力空虚，权练必须尽快回到朝歌驻守，防止宵小之徒有什么野心。
而偶遇白国撤退的太急，谢躬趁机占据了赵国与白国之间的广大地区，原来的白郡。
谢躬立即领军占据了邺城，并与流窜在白郡内山林之中的农民军尤来部进行作战，想要完全占据白郡，如此他的手上就有了白郡、清河两郡。
击败了刘子舆，收下赵汉大半的领土，刘秀已经成为河北与白国并肩的大势力。而除了白、刘之外的，就还剩下在辽西搞事情的广阳王刘接，以及占据两郡面和心不和的谢躬。
至于黑山、真定、中山、渔阳、上谷这些人都在刘秀占据邯郸后，向他表示了臣服，刘秀为了安抚他们，仍然让他们带领当地的军队，但是要收回行政权。