淳熙八年(公元1181年)十二月，四十二歲的辛棄疾落職回到上饒帶湖稼軒。他拴住伴他馳騁南北的“栗色的盧”，掛起隨他叱吒風雲的腰間寶劍，開始了他“帶湖吾甚愛，千丈翠奩開。先生杖履無事，一日走千回”的退隱生活。他與“冰肌不受鉛華汙。更旎旎、真香聚”的愛妻一起臨溪植杖，“稻花香裏說豐年，聽取蛙聲一片”；他執鞭教子，“萬事幾時足，日月自西東。無窮宇宙，人是一粟太倉中。一葛一裘經歲，一缽一瓶終日，老子舊家風”，並將他們的名字都改從“禾”字，意在“以力田為先”；他“同盟鷗鷺”“人間走遍卻歸耕：一鬆一竹真朋友，山鳥山花好弟兄”；他訪朋拜友，“醉倒東風眠永晝，覺來小院重攜手”。但他更心心念念的依然是“白日射金闕，虎豹九關開”；他“最苦潯陽江頭客，畫舸亭亭待發”；他仰天長嘯，“算平戎萬裏，功名本是，真儒事，君知否”；他對酒苦吟，“短檠燈，長劍鋏，欲生苔。雕弓掛壁無用，照影落清杯”；他歎“汗血鹽車無人顧，千裏空收駿骨”；他悲“剩水殘山無態度，被疏梅、料理成風月”。他“以氣節自負，以功業自許”，與友朋唱和，與菊柳共語，邀峰嵐同賦，攜風雨人詞，“閑中書石，興來寫地”，寫下了無數辭章。他的學生範開將他的辭章編成《稼軒詞甲集》刊印出版，“大聲鞺韉，小聲鏗鈞，橫絕六合，掃空萬古”的“稼軒詞”旋即鵲起於士林。人們爭相傳閱，一時洛陽紙貴。往昔人們口中讚譽的“辛侯”，漸被“稼軒”而代之，“揮毫未竟，而客爭藏去”。
淳熙十四年(公元1187年)太上皇駕崩，諡號受命中興全功至德聖神武文昭仁憲孝皇帝，廟號高宗。趙昚聞太上皇駕崩，失聲痛哭，兩天不能進食，詔曰：“大行太上皇帝奄棄至養，朕當衰服三年……”詔令太子趙惇參與政事。是年，王淮欲進擬辛棄疾除一帥，周必大以“凡幼安所殺人命，在吾輩執筆者當之”而堅拒。趙昚似乎並沒有完全忘記辛棄疾這個“緩急可用之才”，賜予他主管武夷山衝佑觀的祠祿官。