也先见明军不战而遁，立刻号令全军奋起追击。王振开始命令所部退军路线取道紫荆关（今河北易县西北）。他的打算是借此机会让英宗到自己的家乡蔚州看看自己富丽堂皇的宅院，以炫耀自己的权势。五十万大军按照这个命令向蔚州方向行进。走了四十里，王振忽然想到，数十万兵马，缺乏粮草，到达蔚州后难免不踏坏他家庄田里的庄稼。于是马上改变主意，火急传令改道东行，向宣府方向行进。
瓦剌的兵马在也先带领下跟踪追击，日夜兼程。１３日，明军退至狼山，已被也先追上。为了掩护英宗撤退，派成国公朱勇率兵三万抵御。朱勇率军行至鹞儿岭，陷入瓦剌军队的重围。瓦剌军队从两翼发起攻击，朱勇战死疆场，三万士兵被杀戮殆尽。但这次战役牵制了瓦剌的主力，为英宗及大部队的退去争取了时间。
这天午后，英宗到达土木堡。这里离怀来县城仅二十里，本应继续前进，到怀来宿营。但这时王振发现装载自己财物的一千多辆军车尚未到达，为了不使自己搜刮而来的东西受到损失，便不顾英宗及数十万将士的安危，传令在土木堡宿营。邝野再次奏请车驾疾驱入关，王振压下不报。邝野见其奏疏未有回复，冒死闯进行宫，面奏英宗，乞请继续行进。王振破口大骂：“你这个腐儒，懂得什么军事，再胡说八道扰乱军心，我就杀了你。”邝野忍无可忍，反驳说：“我为社稷生灵，为什么用死来恐吓我！”王振见邝野拼上了老命，就喝令武士将他拖出行宫。邝野在宫门外和几位大臣抱头痛哭。