三月，丁酉朔日，安禄山辞官返回范阳。唐玄宗脱下身上的衣服赏赐给他，安禄山十分惊喜地接受了。他担心杨国忠上奏将他留下来，策马急速出关，乘船沿黄河而下，命令船夫手执拉纤的绳与板站在岸边，每隔十五里一换，日夜不停地赶路，每天前行几百里，经过郡县也不下船。从此只要有人说安禄山造反，唐玄宗都会把他们捆起来送给安禄山。因此人们都知道安禄山将要造反，却没人敢说。
安禄山从长安出发时，唐玄宗命令高力士在长乐坡为他饯行，当高力士返回，唐玄宗问：“安禄山满意吗？”高力士答：“我看他怏怏不乐，一定是知道陛下打算任命他为丞相却中途改变的缘故。”唐玄宗把这件事告诉杨国忠，杨国忠说：“这件事别人不知道，一定是张垍兄弟告诉的。”唐玄宗大怒，贬张均为建安太守，贬张垍为卢溪司马，贬张垍的弟弟给事中张埱为宜春司马。
唐玄宗天宝十四年乙未（公元755年）
二月，辛亥日，安禄山派副将何千年入朝禀奏，请求用三十二名蕃将代替汉将，唐玄宗命令立刻策划，给予任命状。韦见素对杨国忠说：“安禄山早就打算造反，如今又做出这样的请求，造反的意图很明显了。明天我要竭力陈说，如果皇上不准许，你就继续说。”杨国忠答应了。壬子日，杨国忠、韦见素入朝觐见，唐玄宗迎上去对他们说：“你们一定是有怀疑安禄山的想法吧？”韦见素于是竭力陈说已经有迹象表明安禄山造反，安禄山的请求一定不能准许。唐玄宗不高兴，杨国忠有所顾虑不敢说话，唐玄宗全部准许了安禄山的请求。另一天，杨国忠、韦见素对唐玄宗说：“我有方法可以消除安禄山的阴谋。现在如果免除安禄山的平章事，召他来京城，任命贾循为范阳节度使，吕知诲为平卢节度使，杨光翙为河东节度使，形势自然就分明了。”唐玄宗同意了，草拟了诏书，却留下来不发出去，又派中使辅璆琳带着珍稀果品赏赐给安禄山，秘密观察他的意图，璆琳接受了安禄山的丰厚贿赂，返回，极力言说安禄山忠诚报国，没有二心。唐玄宗对杨国忠等人说：“安禄山，我用真心对待他，他一定不会有二心。东北方向的两伙贼人，还要靠他镇抚，我可以保证他不会谋反，你们不用担心了。”事情就这样搁置了。