楊素征戰沙場的時候，楊廣便居住在揚州。江南的山水養人，煙雨之中更帶著幾分靈氣，江南的美女，更讓人流連忘返。楊廣自從來到了揚州，就對這個地方產生了深深的眷戀。
戰役過後，楊廣便留在了揚州，而且一住就是十年時間。隻有逢年過節，或者父皇召見的時候，楊廣才能返回長安城。即便如此，楊堅也不讓他在長安城多待片刻，時間一到，立馬滾回揚州。
從隋開皇元年（581）開始，一直到隋開皇二十年（600）左右，總共二十年的時間，楊廣幾乎都待在外地，很少有機會回長安城，更沒有機會在老爹和老媽麵前表現自己。至於謀害太子楊勇的陰謀論，更是無稽之談。
某些史書將楊廣刻畫成城府極深，陰險狡詐，手段卑劣的形象，認定他從一開始就覬覦皇太子之位，為了上位，一步步構陷大哥，不管是時間邏輯，還是空間邏輯，其實都是站不住腳的。楊勇的倒台，另有其他的原因。
根據《資治通鑒》的記載，最早提及楊堅想要廢黜楊勇的說法，是在隋開皇十九年（599）六月，當時的記錄是這樣的：時太子勇失愛於上，潛有廢立之誌，從容謂熲曰：“有神告晉王妃，言王必有天下，若之何？”熲長跪曰：“長幼有序，其可廢乎！”上默然而止。獨孤後知熲不可奪，陰欲去之。
這一段話，信息量可是非常大啊。
第一，隋開皇十九年（599）六月前後，老爹和老媽都對楊勇產生了嚴重的不滿。
第二，獨孤皇後不僅想扳倒楊勇，還想鏟除重臣高熲。
第三，有人告密，說晉王妃做了一個夢，夢見自己的老公可能會做皇帝。
關於第三條，可信度實在不是高啊。想想看，晉王妃做夢是可能的，夢到楊廣做皇帝也是可能的，問題是，楊堅還在做皇帝呢，說自己的老公會擁有天下，豈不是大逆不道？自找死路？