此時，趙光義也是在思考，楊家確實被自己控制起來，這次的事情也是子虛烏有。可是不這麼做，自己怎麼掌控楊家將，在邊界只有楊重貴，卻沒有自己這個皇帝，這不是很危險。站在他哥哥角度，他越來越明白，為何自己的哥哥要重文輕武？原來是有理由，武將容易擁兵自重，往往超出控制，尤其是今日的事情。不是很危險嗎？楊家將，守衛邊界，但是自己可以說楊家將，別人不能夠說得。楊重貴說自己的楊家將，願為大宋戰至一兵一卒。不是告訴天下人，這個天下，沒有他楊重貴，就沒有朕自己坐穩江山，在你楊重貴心裡是不是覺得大宋的部隊是你私人的。朕給你的部隊，是你自己能夠有的。楊重貴，你根本沒有把朕當皇帝，你不是想要繼續守衛，那朕偏偏就不讓你守衛，別怪朕心狠手辣的人。
“楊重貴當成他私人軍隊，楊家將，這是他楊家軍隊嗎？這是他個人利益。傳朕旨意，楊重貴不用三堂會審，也不用經大理寺核實。從現在開始，取締楊重貴雄州兵馬都統職位。廢為庶民。”趙光義生氣地開口說道。
劉文裕心裡暗自高興，楊家將我看你們這次還沒有機會翻身機會。哼哼！不過他雖然高興，到也知道皇上脾氣。有些時候脾氣。只是一時，到了皇上覺得楊家父子幾人還有用的時候，還會用，因此他必須要把所謂楊家將，置於死地，不然楊家將翻身，肯定是更加不把自己放在眼裡。因此他覺得要麼不做，要做就需要做絕？
“陛下，楊家父子或許沒有這樣的感覺，他們心裡是不是真的效忠官家，畢竟他們想要目的還是希望為大宋服務。他們說過帶領軍隊為陛下開疆擴土。這樣的忠勇之人怎麼可能會出現反心。臣擔心覺得這是不是官家想多了。希望您明查。不可因為一時之錯誤想法就失去國家忠臣，臣希望皇上收回成命。多為國家考慮，大宋不能夠沒有楊家父子，畢竟他們是大宋棟樑之才，沒有他們大宋應該怎麼操作！官家慎思而行。”劉文裕假裝為楊業父子幾人求情地開口道？
“你說的不就是說我大宋離不開他楊家將，離不開他楊重貴父子嗎？當然或許朕真的是想多了，可是古人的話，也不是完全都是假的，擁兵自重，這不是假的，不過一杆子打死，或許別人就會說朕是昏君。可是朕要是放過楊重貴，萬一別人也給他一樣，都把大宋軍隊當做他自己軍隊。按照你的想法你覺得朕應該如何操作比較合適，畢竟楊家父子事情，雖然只是謠傳，不過難保是真的，按照你的想法說說。”趙光義也是深思很久詢問道。