但王閣老與盧方卻不這樣想，他們急急地要排除於善謙，是有著本身的利害關係的，中書門下兩者，雖與尚書並列三台，論地位似在六部之上。
但是真正掌權的還是尚書省，因為左右仆射，雖與門下的侍中、中書令等並為三台之首，一樣的被稱為閣老，但是實權卻不如，相國之稱，隻有左右仆射可當之。
尚書省下屬六部尚書才是真正的掌實權的，而六部中，尤以兵、吏、戶三部。分掌軍事、人事、財政三個部門，最受時重，王閣老掌門下侍中，盧方新進中書，說起來是入閣，勉強也可以冠個閣老之稱，但絕不會有人稱他們相國，那是尚書省最高長官左右仆射專有的。
即使是六部尚書，對中書門下兩者，也是愛理不理的，王閣老一向是個閑員，盧方來了之後，因為帝眷尚隆，故地位稍受尊重，但他們六部間。有時行事亦不免會受掣，而於善謙對他們更是不肯買帳。
劉鐸官拜尚書，地位不低，但長的是禮部，沒多少實權，自然也不太清楚比中恩怨，這兩個人對於善謙下台，目的絕不是僅僅為了李益。
苦在對劉鐸無以明言，王閣老一歎道：“事情在寒舍發生的，而且老朽在接下於老兒的辭呈時，以為事已必成，神色之間並沒有對他表示了太多的關切，他心裏有數，一定會知道我們是合謀算計他的，隻要聖上加以挽留，這老兒走不成，以後一定對老朽頗為噙怨……”
劉鐸道：“那不至於吧！”
王閣老歎道：“劉公，你不清楚我們之間的恩怨，這是一定的。盧公，看來我們要夤夜上高暉家裏走一趟，務必促成此事付諸實行，打消聖上挽留之意。”
盧方也感到事態很嚴重，但又有點顧慮道：“這麽晚了，我們去方便嗎？再說高暉又能有什麽辦法呢？”
王閣老道：“高暉在告辭時，曾經向老朽透露過一點他與於老兒結怨的秘辛，似乎還另外掌握著一些打擊於老兒的證據，那倒的確是可以叫於老兒滾蛋的，隻是他也沒把聖上會挽留這個可能計算在內，所以你我要走一趟，促使他進行第二個計劃……”