又請以三十騎劫取以來，至潼關殺之。翰曰：“如此，乃翰反，非祿山也。”或說國忠：“今朝廷重兵盡在翰手，翰若援旗西指，於公豈不危哉！”國忠大懼，乃奏：“潼關大軍雖盛，而後無繼，萬一失利，京師可憂。請選監牧小兒三千於苑中訓練。”上許之，使劍南軍將李福德等領之。又募萬人屯灞上，令所親杜乾運將之，名為御賊，實備翰也。翰聞之，亦恐為國忠所圖，乃表請灞上軍隸潼關。六月，癸未，召杜乾運詣關，因事斬之；國忠益懼。
會有告崔乾祐在陝，兵不滿四千，皆羸弱無備，上遣使趣哥舒翰進兵復陝、洛。翰奏曰：“祿山久習用兵，今始為逆，豈肯無備！是必羸師以誘我。若往，正墮其計中。且賊遠來，利在速戰；官軍據險以扼之，利在堅守。況賊殘虐失眾，兵勢日蹙，將有內變；因而乘之，可不戰擒也。要在成功，何必務速！今諸道徵兵尚多未集，請且待之。”郭子儀、李光弼亦上言：“請引兵北取範阻，覆其巢穴，質賊黨妻子以招之，賊必內潰。潼關大軍，帷應固守以弊之，不可輕出。”國忠疑翰謀己，言於上，以賊方無備，而翰逗留，將失機會。上以為然，續遣中使趣之，項背相望。翰不得已，撫膺慟哭；丙戌，引兵出關。
己丑，遇崔乾祐之軍於靈寶西原。乾祐據險以待之，南薄山，北阻河，隘道七十里。庚寅。官軍與乾祐會戰。乾祐伏兵於險，翰與田良丘浮舟中流以觀軍勢，見乾祐兵少，趣諸軍使進。王思禮等將精兵五萬居前，龐忠等將餘兵十萬繼之，翰以兵三萬登河北阜望之，鳴鼓以助其勢。乾祐所出兵不過萬人，什什伍伍，散如列星，或疏或密，或前或卻，官軍望而笑之。乾祐嚴精兵，陳於其後。兵既交，賊偃旗如欲遁者，官軍懈，不為備。須臾，伏兵發，賊乘高下木石，擊殺士卒甚眾。道隘，士卒如束，槍槊不得用。翰以氈車駕馬為前驅，欲以衝賊。日過中，東風暴急，乾祐以草車數十乘塞氈車之前，縱火焚之，煙焰所被，官軍不能開目，妄自相殺，謂賊在煙中，聚弓弩而射之。日幕，矢盡，乃知無賊。乾祐遣同羅精騎自南山過，出官軍之後擊之，官軍首尾駭亂，不知所備，於是大敗；或棄甲竄匿山谷，或相擠排入河溺死，囂聲振天地，賊乘勝蹙之。後軍見前軍敗，皆自潰，河北軍望之亦潰，瞬息間，兩岸皆空。翰獨與麾下百餘騎走，自首陽山西渡河入關。關外先為三塹，皆廣二丈，深丈，人馬墜其中，須臾而滿；餘眾踐之以度，士卒得入關者才八千餘人。辛卯，乾祐進攻潼關，克之。
翰至關西驛，揭榜收散卒，欲復守潼關。蕃將火拔歸仁等以百餘騎圍驛，入謂翰曰：“賊至矣，請公上馬。”翰上馬出驛，歸仁帥眾叩頭曰：“公以二十萬眾一戰棄之，何面目復見天子！且公不見高仙芝，封常清乎？請公東行。”翰不可，欲下馬。歸仁以毛縻其足於馬腹，及諸將不從者，皆執之以東。會賊將田乾真已至，遂降之，俱送洛陽。安祿山問翰曰：“汝常輕我，今定何如？”翰伏地對曰：“臣肉眼不識聖人。今天下未平，李光弼在常山，李祗在東平，魯炅在南陽，陛下留臣，使以尺書招之，不日皆下矣。”祿山大喜，以翰為司空、同平章事。謂火拔歸仁曰：“汝叛主，不忠不義。”執而斬之。翰以書招諸將，皆復書責之。祿山知無效，乃囚諸苑中。潼關既敗，於是河東、華陰、馮翊、上洛防禦使皆棄郡走，所在守兵皆散。
是日，翰麾下來告急，上不時召見，但遣李福德等將監牧兵赴潼關。及暮，平安火不至，上始懼。壬辰，召宰相謀之。楊國忠自以身領劍南，聞安祿山反，即令副使崔圓陰具儲偫，以備有急投之，至是首唱幸蜀之策。上然之。癸巳，國忠集百官於朝堂，惶懅流涕；問以策略，皆唯唯不對。國忠曰：“人告祿山反狀已十年，上下之信。今日之事，非宰相之過。”仗下，士民掠擾奔走，不知所之，市裡蕭條。國忠使韓、虢入宮，勸上入蜀。
甲午，百官朝者什無一二。上御勤政樓，下制，雲欲親征，聞者皆莫之信。以京兆尹魏方進為御史大夫兼置頓使；京兆少尹靈昌崔光遠為京兆尹，充西京留守；將軍邊令誠掌宮闈管鑰。託以劍南節度大使潁王璬將赴鎮，令本道設儲偫。是日，上移仗北內。既夕，命龍武大將軍陳玄禮整比六軍，厚賜錢帛，選閒廄馬九百餘匹，外人皆莫之知。乙未，黎明，上獨與貴妃姐妹、皇子、妃、主、皇孫、楊國忠、韋見素、魏方進、陳玄禮及親近宦官、宮人出延秋門，妃、主、皇孫之在外者，皆委之而去。上過左藏，楊國忠請焚之，曰：“無為賊守。”上愀然曰：“賊來不得，必更斂於百姓；不如與之，無重困吾赤子。”是日，百官猶有入朝者，至宮門，猶聞漏