楊林回洛陽之後，王生等人都收斂了很多，奈何朝上三公失了兩位，如今木已成舟，楊廣身為天子，楊林也不好過分斥責，無奈隻得請命留在了洛陽。
趕赴曲阜的王盛國歸來之後一頓添油加醋，最後才取出了先帝遺詔，楊林當堂便沒有好臉色，訓斥了王盛國之後將詔書上呈給了楊廣。
楊廣連忙起身，接過看了許久，不知心中何想，最終揮了揮手道：“即有先帝遺詔，此番非爾之罪，王禦史受累，著升為吏部從三品侍郎中。”
王盛國謝恩退下，楊廣當即諫道：“老臣認為儒官隻需不結朋黨，陛下仍當重用之，當世教化不可荒廢。”
楊林乃是楊廣叔父，楊家嫡係，其言語眾士族無人敢違，早朝草草結束，楊林一人回到了王府，當天喝的大醉，一個人在書房之中掩麵哭泣，連呼先帝名諱。
如今大隋外有仇敵，內有兵亂，內外交困之時楊廣卻自斷雙臂，大廈將傾，楊林雖然勇武仍難免心中之悲痛。
公元615年秋，突厥可汗進貢金銀十萬兩，牛羊數千頭，拜楊廣為聖可汗，楊廣聞之大喜親自前往，不想被突厥可汗圍困於雁門關外。
好在楊宇率九龍衛拚死護衛，最終九龍衛戰死大半，隻剩兩支隊伍護著楊廣歸來。途遇李淵率眾救駕，擊退了突厥叛軍，自此臣服大隋大數年的突厥也不再進貢。
楊廣回到洛陽之後因李淵救駕有功封其為唐國公，隨後楊廣便不再理會朝政，意誌消沉，仿佛一下失去了雄心壯誌，不顧楊林反對，公元615年末楊廣再下江都。
時任長安牧守的楊太感，聽從謀士李密建議，率兵圍困洛陽，準備截斷楊廣的歸途，打響了士族起義的第一仗。
楊廣南下之後，楊林率眾前往河南等地平叛，洛陽城中隻有韓擒虎率五萬大萬留守，麵對兩倍於自己的楊太感，韓擒虎固守高城，以逸待勞。