帮勋臣集团决议将驻屯徐州的靖难军撤回江南固然是为了掩盖败绩，但对已危在旦夕的江南局势也看得很清楚，调集南京守备各军围追堵截，俞大猷稍一犹豫，全军就被缠住，无法脱身。经过几番恶战，江南游击军终究不敌数倍于己的敌人，且战且退，于七月二十八日撤到了常州。
到了此时，那帮文官总算是明白了再在南直隶纠缠下去，就有全军覆没之虞，同意俞大猷撤回浙江，或向东南撤至宁波，或向西南进天目山游击的动议。但是，战机稍纵即势，因浙江巡抚郭万象担心祸水再次被引向本省，也调集通省兵马在南直隶与浙江交界的湖州一线部署重兵防堵，久战兵疲、伤亡惨重的江南游击军无法突破浙省防线，不得不返回常州，选择了在常州驻守。
一撤入常州，俞大猷便命人清点城中人丁仓储，征集军需粮草，紧急部署城防诸事。江南游击军、南直隶锦衣卫、义勇乡民，以及所有能被动员起来的青壮男丁都被武装了起来，编队分组，划分防御地段，日夜轮班值守；城中的老幼妇孺也都被动员了起来，在城下烧煮食宿，也是日夜轮换。岳林等文官都分派了任务，或率民众搬运木石、抢救伤员，或率工匠赶制兵器、铸造炮弹。俞大猷、宋子端等各级军官将佐更是长居城上，与全军兵士