為了回援金國太子完顏宜，金兀術不得不放棄廬州，撤回人馬，偽齊的秋季攻勢隨之瓦解。嶽飛上書朝廷“……敵國喪，宜收複失地”的奏請，並沒有得到南宋朝廷的同意，原因很簡單，那就是“大聖大王”楊幺在洞庭湖越來越猖獗，隊伍已經發展壯大到幾十萬人（當然，楊幺的人馬亦兵亦民，甚至包括家屬、小孩），高宗趙構認為：“湖匪為腹心害，不先去之，無以立國。”
自靖康之難以來，一個頗為強悍的大宋王朝，已經變得千瘡百孔，滿目瘡痍。二帝被擄之後，有的州官投靠金人，有的州官攜家逃遁，有的州官發生叛亂，盜匪四起，民不聊生。中原有杜叔五、李成之亂，福建路有範汝為、曹成之亂，荊湖路有孔彥舟、楊幺之亂，勢大者自立為王，鍾相、楊幺就是這樣的混世魔王。
楊幺的人馬為什麽會如此迅速地壯大起來？原來，靖康之難時，鍾相長子鍾子昂招募一支三百人的勤王隊伍，到達趙構即位的南京應天府後，初登帝位的趙構不僅將大元帥府的人馬重新編製，而且為了安撫百姓，將鍾子昂帶領的三百人隊伍隨即遣散。但鍾相父子看到天下已經大亂，便將原來招募的“百姓兵”團集在家，結成隊伍，多置旗幟、器甲，打著“勤王”的旗號，作亂世之資。
建炎四年二月，原出身盜匪的京東西路東平府鈐轄孔彥舟作亂，並殺到鼎州北麵的澧州。鍾相乘著地方官逃遁的機會，也發動叛亂，自立為楚王，建立了割據政權，並很快占據了洞庭湖周邊的大部分州、縣，包括鼎州全境的武陵、桃源、辰陽、沅江。
因為時局動**不安，百姓為求自保，紛紛加入到鍾相父子的隊伍中來，鍾相的地盤逐漸發展到澧州全境的澧陽、石門、安鄉、慈利四縣，荊南府的枝江、鬆滋、石首、公安和峽州宜都縣，嶽州華容縣，辰州沅陵縣，潭州的益陽、寧鄉、湘陰、安化等，也盡在鍾相父子的手中。