虽然，王佐的撒豆成兵给北府军的重骑兵带来了很大的麻烦。但是这些身经百战的北府精锐处惊不变，依旧保持着昂扬的斗志。他们看到骑马作战不利，就都跳下马来，作为重装步兵投入战斗，与冲锋陷阵的无当飞军开战肉搏。两军一直血战到四更天，都伤亡惨重。北府军拼尽了全力却始终无法突破无当飞军的阵地，胡隐之得不得暂停了进攻，后撤二十里扎营修整，准备明日再战。
王佐看到北府军撤退，随即传令军队停止追击，一面命部下埋锅造饭，一面派出斥候探查胡隐之的情形。胡隐之的后卫部队看到王佐的部队没有继续追击，反而在鹿砦后面造饭进食时，稍微松了一口气，总算是安顿下来。
无当飞军吃过晚饭正要休息，王佐的传令兵就骑着马在土围子里面飞驰传令，命令全军往西出动，追击胡隐之。众人与北府军血战了三个时辰，早已疲惫不堪，此刻人困马乏哪里还能再战？王佐的军令一出，下面的人无不怨声载道。
袁文德也上前为三军请命道：“将士苦战一夜，人困马乏，安能再战？乞帅爷暂且罢兵，容将士休整一晚，明早再战不迟。”
王佐却斩钉截铁地说道：“不行！现在若不乘胜猛攻，赶明儿胡隐之从孤山调来援兵，咱们的处境就更加危险。我知道将士们幸苦，但时不我待，必须速下决心，歼灭此一顽敌。我等才有一线生机！”
众将还要再谏，王佐勃然大怒，高举手中佩刀向众将展示，厉声呵斥道：“有敢不奉令者，杀无赦！”
众将皆不敢再求，纷纷回到军队中，整顿军马，准备出战。