见瓦刺一兵一卒，而且还未交战就突然间撤退，这未损军士未必是什么好兆头！恐怕瓦刺兵有诡计？
因此他再次跪在明英宗面前请求回军，还是被拒绝了！
为此还派人请明司礼监掌印太监入营帐内，商议撤军之事，在提醒明司礼监掌印太监不要中了瓦刺军的埋伏，但明司礼监掌印太监也依旧不肯听，反而还以明兵部尚书怯战贪生怕死为由，大骂他一顿就扬长而去了。
到了第二日，明大同府监军太监：郭敬，把前几天大同左卫、大同右卫、云川卫、玉林卫，前线惨败的情况写信密告给明司礼监掌印太监。
在信中除了写地方明军战败的消息之外，还告知道“如果继续北进，此乃正中北虏之计也！”
因此明司礼监掌印太监看了这封信后，才开始害怕起来，急忙传令明兵部尚书入营帐内，商议如何撤兵之法？但两人的意见却不太一样！
在8月初3日，经过明兵部尚书与明司礼监掌印太监互相协调之后，最终初议从山西行都指挥使司大同府大同镇南下，过许家庄堡、广灵县、蔚州（蔚州卫），出广昌县（广昌守御千户所）进入北直隶保定府易州紫荆关守御千户所。
如此一来途中正好经过他的家乡蔚州（蔚州卫），也好让明英宗的御驾去他的府第，向家乡父老们显示自己的威风，故此京军们全部撤出大同府，全力赶路南下。
由于未跟瓦剌军交战就仓皇撤退，所以京军队形很松乱！在走了40里路程之后，明司礼监掌印太监忽然想起来，要是大队人马经过蔚州（蔚州卫）的话，一定会损坏他家乡的田园庄稼！
于是他又改变主意了，火速传令改道东行向万全都指挥使司宣府镇方向行进绕道。
此时后方的瓦剌太师淮王已知明军不战而逃，急忙整军来追，形势十分紧张，明定襄伯：郭登，和明翰林院大学士：曹鼐，向明司礼监掌印太监建议道“自此到紫荆关守御千户所，只有不到40里路程了，王大人应该从紫荆关守御千户所进入北直隶回京，不应该再绕道万全都指挥使司宣府镇了！以免被北虏大军追击御驾不保！”
但明司礼监掌印太监却不听，一意孤行坚持折向回万全都指挥使司宣府镇。
这样京军们又迂回奔走，一路颠簸终于在8月10日，退到了万全都指挥使司宣府镇宣府右卫，不幸的是瓦剌大军随后也跟到了，但明宣府总镇总兵：杨洪，却并未提前派人阻击瓦剌军。
接着明英宗急忙派遣明恭顺伯：吴克忠、明广义伯：吴克勤，率兵断后以掩护自己撤退，结果他俩都战死沙场！
瓦剌军又追了上来。
无奈只得派明成国公：朱勇，率领3万人在兔毛岭阻击瓦剌军，再次掩护明英宗南撤，这次虽全军覆没，但终为京军赢得了三天的宝贵撤退时间。
8月14日，明英宗经过保安州（保安卫）率京军到达土木堡，这里距离前方的怀来卫与隆庆右卫，不过二十里路程。
因此颠沛流离的明英宗连忙走出御驾，骑上战马准备进入怀来卫与隆庆右卫城池稍作休整，但明司礼监掌印太监却因，自己刚刚搜刮来的1千辎重的18辆马车还未赶到，害怕受损失以及被人发现。
而且他觉得瓦剌军应该没那么快到来的，就不顾大军的安危，下令在土木堡内就地扎营等待。
此时的京军们就在怀来卫与隆庆右卫北面的土木堡位置，只要再坚持走上一个时辰，就可以安然无恙地进入怀来卫与隆庆右卫城内布防扎营，到时候瓦剌军也就在难攻打了。
为此瓦剌平章政事：绰罗斯·伯颜帖木儿（也先的大弟弟），也劝说瓦剌太师淮王停止追击，他认为明军一旦全速撤入怀来卫与隆庆右卫，则瓦剌军不但毫无收获，更有可能被明军围歼。
起初瓦剌太师淮王也有撤退的念头，可当瓦剌侦查骑兵回来汇报时，告知京军已经在土木堡内安营扎寨，他这才放心追击。
然而明兵部尚书还是一再请求明英宗先行撤入怀来卫与隆庆右卫，再进入内长城隆庆卫居庸关一带以确保安全，到时候在组织精锐部队断后拒敌。
但这些请求则被明司礼监掌印太监置之不理，还不准他再见皇帝陛下！
因此没有办法的明兵部尚书，为了皇帝陛下的安危，只得孤身闯入行殿营帐内请求明英宗速行，恰好又被夜巡的明司礼监掌印太监给撞见，他怒不可言，大骂道“你这个腐儒，怎么会知道用兵之事呢？再若胡说八道，则必死无疑！”
说完就即刻命令北镇抚司锦衣卫队，强行把明兵部尚书给拖了出去。