彭越就是这么起家的，他杀伐果断，令行禁止，在很短时间内就把一帮小混混改变成了一支勇敢善战的游击队。然后彭越开始招兵买马、攻城略地，队伍迅扩大到了一千多人。
彭越积极协助沛公攻打昌邑，可惜没能拿下。沛公眼见昌邑久攻不下，便决定引兵西进。彭越舍不得离开家乡，便和沛公分手，回到巨野泽继续做他的山大王。
离开昌邑后，沛公回师栗邑（河南商丘）休整。在栗邑，沛公遇到了楚怀王部将武刚候，此刻武刚侯手下有四千多人。史书称沛公“夺”其军并入自己的队伍。这个武刚候名字叫陈武，应该是沛公的老相识了。当初，攻打丰邑雍齿的时候，沛公向项梁借兵五千，其中一半就是陈武带领的队伍。如今老朋友相见，自然久旱逢甘雨般的高兴。
当然，更高兴的还是沛公。不知是好言相劝还是霸王硬上弓，反正陈武的四千部队划入沛公手下。从这一个“夺”字看来，他没有经过楚王同意，将在外嘛，君命有所不受。这件事可以看出沛公翅膀硬了，或者说，西征军东奔西突，南征北战给楚怀王解决了许多头疼的问题，情况紧急，未经请示，先办了再说。沛公觉得楚怀王会理解的。
充实了力量后，沛公又联合魏将皇欣、武满的军队，第二次对昌邑的进攻。沛公仍然采取了围攻的方式。但是昌邑坚如磐石，任凭沛公怎么攻都没有拿下昌邑县城，这下沛公这边的士兵感到疲倦，粮草也快供应不上，他不得不只好退兵。