不出李林甫所料，杨国忠取代王鉷之后，立刻就把枪口掉过来对准了他。
杨国忠利用王鉷的案子大做文章，指控李林甫和王鉷兄弟暗中勾结，并且和突厥叛将阿布思也有瓜葛。阿布思是突厥降将，曾一度归顺大唐，后来因与安禄山有隙而再度叛回漠北。
为了彻底扳倒李林甫，杨国忠还怂恿**烈和哥舒翰一起出面指证。对于杨国忠等人的指控，玄宗当然是不会轻易采信的。可尽管如此，从这个时候开始，玄宗还是逐渐疏远李林甫了，转而把全部的信任和恩宠都给了杨国忠。
至此，杨国忠入相已成定局，而李林甫也成了他必欲拔除的眼中钉。“国忠贵震天下，始以林甫为仇敌矣……”
在这场激烈的政治角斗中，杨国忠很可能会笑到最后。
面对如此恶劣的形势，李林甫不可避免地产生了临深履薄之感。他生平第一次感到了恐惧。
这个位极人臣、势倾朝野、主宰帝国政局长达十多年的一代权相，生平第一次感到了一种强烈的恐惧……
但是到了天宝末年，随着杨国忠在帝国政坛上的强势崛起，李林甫独揽朝纲的时代就一去不复返了……
天宝十一年（公元752年）冬天，杨国忠日益得宠，其拜相之势已经非常明显。
正当李林甫在苦思应对之策时，剑南道忽然传来战报，称南诏军队多次入寇，蜀地军民一致要求遥领剑南节度使的杨国忠回去镇守。李林甫大喜过望，立刻奏请玄宗，命杨国忠出征。
杨国忠虽然当过兵，可从没打过仗，假如真的让他去边境指挥作战，就算不把命搭进去，百分百也是个输。一门心思要当宰相的杨国忠当然不想去接这个烫手山芋，于是哭哭啼啼地跟玄宗说，李林甫建议让他出征，摆明了就是要陷害他。同时，杨贵妃也一再帮杨国忠求情。玄宗赶紧安慰他说：“你先去走一趟，把军事防御部署一下，我掐着日子等你回来，你一回来我就任命你为宰相！”
有了天子的承诺，杨国忠总算吃了颗定心丸，于是不情不愿地出发了。得知杨国忠入相已成定局，李林甫大为忧惧，可是又计无所出，惶悚之下顿时一病不起。
这个在帝国的权力巅峰呼风唤雨很多年的政治强人，如今终于无可挽回地倒了下去。
杨国忠到了剑南，没待几天，玄宗就迫不及待地把他召了回来。
一回朝，杨国忠就听说李林甫病得爬不起来了。他心中窃喜，可同时却又满腹狐疑。
…。。