時曹仁火燒江陵，攜甲兵輕裝而撤。二劉為救江陵城郭，追擊不成。霍峻雖探查到曹仁、張郃、朱靈等將動作，但畏三將的兵馬數量，不敢上岸阻擊，隻得放曹仁撤回襄陽。
約有一萬五千人的曹仁所部，在張郃、朱靈、李通的接應下，成功撤回襄樊。時滿寵帳下三千，張郃、朱靈、李通三將兵馬亦有萬餘之眾。
今襄陽兵馬約有三萬，霍峻礙於兵馬不足僅能利用水師退守魚梁洲。然所幸的是，在拿下江陵城郭後，二劉收到霍峻的書信，也能知道前方的難處，派出黃忠、張飛二將支援前線。
此時身在魚梁洲大營的霍峻，正與眾將商討如何將漢南百姓遷走。
“曹仁自歸襄陽，與帳下諸將聚鄉野百姓數萬於隆中山區，又於周圍劫掠百姓，欲遷往葉、宛，以實南陽百姓之瘠。”陳越說道：“今敵兵馬三萬餘眾，甲兵充沛，以我帳下軍士恐難力敵。”
霍峻目光盯著輿圖，說道：“我軍用水師斷絕漢水，以漢南之糧，安能養八九萬兵民？以某所見曹軍必有北返動作，彼時或乃我軍之良機也！”
吳楚擁有水師的優勢，這是曹操無法媲美的。霍峻利用水師北上漢水，雖沒全部阻斷漢水，但也控製了漢水的大部，曹操若要調兵遣將，必須從漢水上遊渡過方可。
交通大道難行，即代表著中原地區的糧草無法南下，漢南的曹軍多是在消耗過往劉表留下的餘糧。
今時百姓被曹仁所聚攏，必然需要糧食，總不能遷徙百姓，卻不管他們。考慮到糧草輜重的消耗，且百姓過多不利管轄，曹軍必然會先遷部分百姓向北。百姓遷移之際，則是霍峻下手的機會。
霍峻指著襄樊輿圖，說道：“漢南，曹軍危險之地，久持則民難存。今夏季將至，漢水又將上漲。及曹軍過江，我借舟舸之優，用數千人控衛漢水。某統萬餘人與漢南曹軍諸部對峙，又遣萬人軍士遷徙民眾，則漢南大多之民將被我所得。”