蘇軾離開黃州，過長江，經慈湖，達九江，廬山到了，他要上去遊玩一番。
廬山林木蔭翳，峰回霧繞，自古秀絕天下，是文人們大發詩情的地方。但蘇軾到廬山以後，卻表態說：此次上山，隻遊玩，不寫詩。——這話自然不能當真。
後來蘇軾在《記遊廬山》中說：廬山“山穀奇秀，平生所未見”，沿途美景應接不暇，本來決定不寫詩的，可是到了山中，看到不少僧俗，指著我說“蘇子瞻來矣”。大家既然這麽好客，能有什麽辦法呢，隻好寫一首。於是一首一首地寫個不停。
蘇軾到廬山時，正好四十九歲，而大詩人李白四十九歲時也到過廬山，蘇軾對此感慨不已，歎惜“謫仙固遠矣”，“世道如弈棋，變化不容覆”，但在他心裏，是願意把自己比作李白的。
與王安石推崇杜甫，輕視李白不同，蘇軾特別佩服李白，認為李白“開濟明豁，包含宏大”，同時又敢於“陵轢卿相，嘲哂豪傑”，“雄節邁倫，高氣蓋世。可謂拔乎其萃，遊方之外者也”。這也是蘇軾自己的理想境界。但事實上李白沒有達到這個高度，蘇軾自然也沒有。
因為崇拜李白，蘇軾在《李太白碑陰記》中，試圖為李白跟隨永王李璘之事進行辯解。李璘和李亨都是唐玄宗之子，安史之亂後，李璘擁兵南方，有自立為王之意，被唐肅宗李亨興兵誅殺。所以，李白跟隨李璘被當成一件不光彩的事，而李白也正是因此而被流放，途中遇到大赦，才得以“千裏江陵一日還”。
蘇軾為李白辯護說：“士固有大言而無實，虛名不適於用者”，但李白不是這種人，隻看他讓高力士脫靴一事，就可知李白是一個“氣蓋天下”的勇士，這種人一旦得誌，“必不肯附權幸以取容”，又怎麽會跟著永王李璘造反呢？所以，蘇軾認為，李白跟隨李璘，“當由迫脅”，是被逼的。“不然，璘之狂肆寢陋，雖庸人知其必敗也”，何況李白？