唐玄宗寻欢作乐的时候时常把朝政交给李林甫打理，而李林甫不仅阴险还很任性，他不喜欢当时的太子一党，便开始着手对付东宫党羽，最后连太子都被他设计废掉了；还有曾经的同僚眼看如今都一个个升职，在朝堂上可以跟他分庭抗礼，他岂能容忍？接连不断的打压之下终于将大权握在自己手中，之后为了巩固自己的地位又开始拉拢各地节度使，一时间权势滔天，这也是安禄山忌惮他的最重要因素。
在很早之前，安禄山年轻气盛仗着唐玄宗的宠爱和与杨贵妃的私情，每次回长安城看着繁荣昌盛的景象，内心对于权势的渴望都蠢蠢欲动，这点唐玄宗没看出来，杨贵妃没看出来，可是李林甫却一眼能看透他的心思。
所以在安禄山还没成气候的时候，一直对李林甫恭敬有加，这也是李林甫当初没有对付他的原因，直到后来李林甫去世，安禄山迅速发展势力，出兵长安引发了震惊朝野的安史之乱。
