李林甫早就想好了對策，他馬說道：“啓奏皇，楊大人雖然兼了三十多個職務，主要的工作不過六個方面，一是御史臺的工作，御史中丞吉溫十分能幹，可以接替這部分工作。二是太府寺的工作，三是吏部侍郎的工作，這兩方面的事，臣可以接管過來。四是戶部的工作，張均只任大理寺卿，他可以兼管他戶部侍郎的工作五是門下省的給事中的工作，陳宰相兼侍中，負責處理門下省的事務，兼帶給事中的工作六是京兆尹的工作，可由黃門侍郎張倚代理京兆尹。其他的兼職都可以由所在部門的官員接替，不會有事的。臣在朝中爲官四十年，爲皇分憂十九年，對朝廷中的事務甚爲了解，楊大人去劍南不會影響朝廷的工作。”
李林甫把事情挑明瞭，就是要唐玄宗讓楊國忠離開京城，如果說不讓楊國忠走，那就意味着你不信任我了。不管怎麼樣，我就是要他走，我和陳希烈一起向你打了這樣一個報告，你得批準。
唐玄宗看李林甫的態度這樣堅決，而且正副宰相一起奏，不好否決，買了李林甫的面子，對他說道：“準奏，讓國忠去一趟劍南，處理好南詔的事之後，立即回朝。馬擬旨”李林甫喜出望外，他怕夜長夢多，說讓陳希烈當場擬好聖旨，請唐玄宗畫押。
聖旨下來了，楊國忠一下子傻眼了，馬找到他的黨羽，一起討論如何能不去劍南。張漸對他說道：“楊公看透李林甫的心境了嗎，他就是要將你輦出京城。這說明他現在還在爭寵，要保住他首席宰相的位置。”
楊國忠說道：“這事還用得着你說嗎？我現在是要辦法來對付。怎樣咬住李林甫這條老狗？留在京城。”張漸說道：“裝弱者，會裝嗎？說說李林甫的狠毒，多流些眼淚，喚起皇的同情。”
楊國忠立即進宮，跪倒在唐玄宗腳下：“啓奏皇，臣現在手頭的事情很多，脫不開身，臣推薦鮮于仲通爲劍南節度使，他在劍南一定能解決那裏的邊疆地區的紛爭問題。”
唐玄宗說道：“聖旨已經下了，你在京城的工作，林甫已經安排好了。下去鍛鍊一下很好，又有了打仗的經驗，這方面林甫都沒有。”楊國忠說道：“啓奏皇，臣不願去劍南，臣在京城爲皇分憂。”
唐玄宗爲難了，一邊是用了十九年幫自己幹了無數大事小事的老宰相李林甫，另外一方面是斂財有方自己的新寵楊國忠，兩人的態度截然相反。到底怎麼辦呢？他抬了抬手，對楊國忠說道：“愛卿起來，林甫和希烈士的奏摺已經批覆了，聖旨已經下了，既成事實，不好改啊。”
楊國忠跪在地不起來，突然號啕大哭，一把眼淚一把鼻涕的說道：“李林甫見皇信任我，嫉妒得很，恨不能讓我立馬就死掉，以前的楊慎矜就是他下好套子讓他鑽，結果了他的圈套，給整死了。我這一去肯定要被李林甫害死，他這是下了套子等着我去鑽啊，陛下一定要保護我，一定要爲我作主啊。”
唐玄宗在處理楊慎矜的案子時就有疑問，現在楊國忠重提此事，便問了一句：“楊慎矜不是陰謀復國嗎？難道有冤情？”
“是啊，整個案子都是王鉷一手策劃的，楊慎矜到死還對皇忠心耿耿。李林甫不讓楊慎矜面見皇，將他關押起來，我也是最近才查出來的。”楊國忠跪在地不起來，又冒出一句：“王忠嗣的案子，也是李林甫一手策劃的，原因是爲了防止他進入朝中擔任宰相，他這是妒賢嫉能啊。”
唐玄宗的腦子裏出現了哥舒翰爲王忠嗣求情的一幕，想到他爲了保楊慎矜，讓太監帶口諭，詔見楊慎矜。但楊慎矜始終沒來見他，原來是李林甫在裏面搗鬼。內心說道，林甫呀林甫，爲了保你的相位，不惜誣陷朝廷的棟樑，朕豈能再信任你。對李林甫的看法一下子全改變了，就想馬換掉他的宰相頭銜。
他對楊國忠說道：“愛卿請起，朕知道你的忠誠，你暫時到劍南去一下，將那不懂規矩的南詔王教訓一下，解決好邊疆紛爭問題之後，就回到京城來。我在京城掐着指頭算你的歸期，等你回來之後，我立刻讓你擔任首席宰相，進駐鳳池。你不要辜負了朕的希望，安心的下去吧。”
有了唐玄宗的承諾，楊國忠放心了，他去劍南走一趟，回來就能取代李林甫的位置，對他來說那是最大的喜訊。伏在地說道：“臣聽從皇調遣，這就去劍南，教訓那不懂規矩的南詔王。”欣然領旨，準備去蜀地。
楊國忠到劍南赴任了，李林甫很高興，他立即招吉溫進府，要他整理楊國忠的材料，蒐集他的罪證。正在他緊鑼密鼓的行動的時候，杏兒帶來了喜兒的話，對李林甫說道：“貴妃娘娘這些天高興得很，喜兒說楊國忠去劍南，再回京城的時候，就當首席宰相了。”
李林甫不相信，他派人到內宮之中進一步打探。打探的人傳來信息“唐玄宗已經答應楊國忠，他從劍南迴來就擔任首席宰相。”
李林甫最怕的事情發生了，他一下子癱坐在椅子，不知道如何是好。吉溫說道：“我們現在蒐集楊國忠的罪證已經失去作用了，皇不會相信。他這一招真狠毒，出賣相爺，應該採用更狠毒的辦法來對付他。”
張博濟說道：“現在用朝廷的法律規章已經對楊國忠無效了，有皇爲他撐腰，只能採用非常手段。小婿有一計，可以致楊國忠於死地。”“什麼妙計？快說。”李林甫現在只想楊國忠死，急不可待的問道。
張博濟咬牙切齒的說道：“暗殺我們聘用的護院武師孫鳳是崑崙派的高手，武藝高強，對嶽父大人也很忠誠，派他到劍南去冒充南詔的殺手，尋機刺殺楊國忠，定能成功。楊國忠死在南詔人的手裏，責任由劍南的官員負責，沒有楊國忠誰來接替您的丞相職務？嶽父可以穩坐宰相的位置。”
李林甫思考一會說道：“你太幼稚了，現在不是楊國忠的問題，是皇不信任我了，他許諾楊國忠，已經動了要換相的念頭了。沒有了楊國忠，還有張氏兄弟，這些人都能取代我的位置，你能將朝中的大臣都殺光嗎？我奏摺讓楊國忠去劍南，只是一個試探，如果他批準我的奏摺，證明還信任我，我的相位還能保留。他給了我一個面子，批準了我的奏摺，讓我高興一下。但是當楊國忠要求不去劍南的時候，他許諾楊國忠，很快會讓他回來，而且回來後就讓他當宰相。看起來，皇對我和楊國忠都照顧到了，非常清楚，皇是向着楊國忠的，而且要拋棄我李林甫了。因爲皇給我的只是一個虛面子，但是給楊國忠許諾的可是實實在在的宰相權力啊。他回來我就得讓位，他回不來，我也得讓位，皇說的話就是聖旨，不能更改的。你敢行刺皇嗎？即使皇駕崩了，接位的也是太子，如果太子登基，我就不只是下臺的問題，可能立馬腦袋搬家。除非發動政變，但是我們手裏沒有軍權，調動不了軍隊，沒有這能力。一切努力都是無用的，你們要準備從新做人，收斂往日的飛揚跋扈的氣勢，老老實實的生活。”
李林甫已經七十歲的人，當他知道了唐玄宗的決策之後，確認唐玄宗要拋棄他了，一時間氣結於胸，一下子又病倒了。請醫問藥全不見效，他又讓孫鳳去請孫崇邈。
注：唐朝官名從三品，國子監的主官，負責全國的教育。