待开过军议，又命人把常荣叫来，当面细细地交代了一番。常荣领命，入夜后，自与选出的死士分道离营而去。
当天晚上，开始了“撤军”的准备。次日，紧闭营门，远放探马，忙了一天，把营中能拆的全部拆掉。其间，大约是死士已被元军擒获，下午的时候，有单州哨探远远地前来打探。赵过只作不知。
到了晚上，两更前后，辎重、拆掉的营垒全都装车，胡忠部骑兵先行，赵过率步卒、佟生养部在中间，高延世殿后，悄悄地出了营地。离营前，在营中特地升起了很多的篝火，旗帜诸物也没有去掉，以此来故布疑阵，装得好像真的撤军似的。
行出数里，佟生养部扮作与胡忠部交换位置，实际借机离队，绕走提前，到预定的埋伏位置，便在十几里外的粮仓附近。三军放慢度，继续前行，很快，探马传来了军报：“从单州城里出来了一支骑军。”