李林甫等设席饯行。喝酒之间，林甫举杯相属道：“安公为节度，出镇大藩，任务非轻，凡所作为，须熟计详审，合情中理。林甫身虽在朝，而各藩镇利弊，日夕经心，声气俱知。今三大镇得安公为节度使，正足为朝廷樊篱，唯善图之。”这几句话，明显皋牢挟制。禄山常日素畏林甫，今闻此言，唯有唯唯服从，且逡巡谦谢道：“禄山才短气粗，当此大镇，深惧不能胜任，敢不恪遵明训，诸凡不到之处，全赖相公照拂。”说罢作揖，拜辞起行。
次日，即召三司面谕道：“吾儿居深宫当中，安得与外藩交通，此必妄说也！尔其勿复问；但王忠嗣禁止军计，宜贬官爵以示罚。”遂贬王忠嗣为汉阳太守，将军董延光亦削爵。哥舒翰回镇并州，太子蒲伏御前涕零，叩首谢恩。玄宗好言慰之，自此父子相安。可爱这李林甫屡起大狱，以杨国忠有掖庭之亲，凡事有微涉东宫者，辄使之劾奏，或援觉得证。幸因太子是高力士劝玄宗立的，他常在天子前庇护；太子又仁孝谨静，不敢获咎于杨贵妃，以此得无恙。那晓得杨家兄弟姊妹，骄奢横肆，日甚一日，总之倚着妃子之势。当时官方有几句谎言道：
安禄山只因平时私与杨妃戏谑惯了，今当玄宗面前，不觉失口戏言，幸得玄宗不疑；但杨妃已先为国忠危言所动，只恐弄出事来，自这天今后，每见安禄山，必切切私嘱，叫他说话紧密，出入谨慎。禄山亦晓得国忠责怪他，恐为他所算。又想国忠还不敷惧，那李林甫最能窥察人之隐微，这不是个好惹的，今杨李之交方合，倘二人合算我一人，老迈不便，不如讨个外差暂避，且可徐图弘远之业。但恐贵妃与虢国夫人不舍他，是以迟疑未决。那边杨国忠暗想：“安禄山将来必与我争权，我必当翦除之；但他方为天子所宠幸，又有贵妃与虢国夫人等助之，孔殷难以动摇；只不成留他在京，须设个法儿，弄他到边上去了，渐渐的算计他便是。”正在筹量，却好李林甫上奏一疏，请用番报酬边镇节度使。本来唐时边镇节度使，都用有才略、有声望的文臣，如有功劳，便可入为宰相。今林甫单独擅权，欲绝边臣入相之路，奏称文报酬边帅，怯于矢石，无以御侮；不若尽用番人，则勇而习战，可为国度保卫。玄宗允其所奏，因而边镇节度使，都要改用番人。
前一日，杨国忠曾设席请禄山饯别，禄山借端不往。这日国忠也冒充来相送。禄山怀忿，傲倨不为礼。国忠大怒，自此心中更加衔怨。禄山既至任所，查点军马赋税，练习士卒，屯积粮草，坐镇范阳，兼制平卢、范阳、河东，自永平以西至太原，凡东北一带关键之地，皆其统辖，阵容强大，日趋娇纵。先人有诗云：