人的徒长豪杰相交通，于是就率领他的一帮朋友逃到江中为群盗。番阳令吴芮深得江湖民心，号称番君。英布前去见他。其众已有数千人。番君遂将女儿嫁给他，使他带兵进击秦军。
楚王景驹在留。沛公前去跟从他。张良也聚集了百余少年，将要去从景驹。在路上遇见沛公，遂将部队加入沛公部，成为他的从属。沛公拜张良为厩将。张良多次与沛公谈论太公兵法，沛公欣赏他的才干。常用他出的策略。张良在别人面前谈论，别人都不能理解他的意思。张良说：“沛公似乎是老天给我安排的明主。”因此就留下来不再他去。沛公与张良一道去见景驹。想要请兵攻丰。
当时，章邯将兵北定楚地。屠相地，到了砀山。东阳宁君。沛公引兵西向，与他们在萧西交战。不利。还兵，收兵聚集在留。二月，进攻砀山，连攻三天城破，收集砀兵得六千人，与过去的三千人合起来有九千人。
三月，又攻拔下邑。还军击丰，不下。
广陵人召平，为陈王徇广陵，未下。闻陈王败走，章邯将至，就渡江，假陈王令，拜项梁为楚国上柱国。说：“江东已定。赶快引兵西去攻击秦军。”
项梁遂以八千人渡江西去。听说陈婴已下东阳，遣使欲与其联合，一道西进。