卻說晉安帝加賞劉裕，仍申前命，授裕太傅揚州牧，加羽葆鼓吹二十人。裕隻受羽葆鼓吹，餘仍固辭。還要作偽。乃另封裕次子義真為桂陽縣公。一門炟赫，父子同榮，不消細說。會司馬休之子文思，入繼譙王（宋書謂係休之兄子，）性情暴悍，濫結黨徒，素為裕所嫉視。文思又捶殺都中小吏，由有司上章彈劾，有詔誅文思黨羽，貸文思死罪。休之在江陵聞悉，奉表謝罪。裕飭將文思執送江陵，令休之自加處治。休之但表廢文思，並寄裕書，陳謝中寓譏諷意。裕由是不悅，使江州刺史孟懷玉，兼督豫州六郡，監製休之。
越年又收休之次子文質，從子文祖，竝皆賜死。自領荊州刺史，出討休之。留弟中軍將軍劉道憐，掌管府事，劉穆之為副。事無大小，皆取決穆之。遂率大軍出都，泝江直上。
休之因上書罪裕，並聯合雍州刺史魯宗之，及宗之子竟陵太守魯軌，抵禦裕軍。裕招休之錄事韓延之，延之複書拒絕。乃使參軍檀道濟、朱超石，率步騎出襄陽，又檄江夏太守劉虔之，聚糧以待。道濟等未曾得糧，虔之已被魯軌擊死。裕再使女夫振威將軍徐逵之，偕參軍蒯恩、王允之、沈淵子等，出江夏口，與魯軌對壘。軌用埋伏計，誘擊逵之，逵之遇伏陣亡。允之淵子赴援，亦皆戰死。獨蒯恩持重不動，全軍退還。
劉裕聞報大怒，自率諸將渡江。魯軌與司馬文思，統兵四萬，夾江為守，列陣峭岸。岸高數丈，裕軍莫敢上登，彼此相覷。裕怒不可遏，自被甲胄，突前作跳躍狀。諸將苦諫不從，主簿謝晦將裕掖住，氣得裕頭筋暴漲，瞋目揚須，拔劍指晦道：“汝再阻我，我將殺汝！”想為女婿被殺，因致如此。晦從容道：“天下可無晦，不可無公！”必欲留他篡晉耶！裕尚欲上躍，將軍胡藩，亟用刀頭鑿穿岸土，可容足指，躡跡而上。隨兵亦稍稍登岸，直前力戰，軌眾少卻。裕麾軍上陸，用著大刀闊斧，奮殺過去，軌與文思，立即敗潰。一走一追，直抵江陵城下。休之與魯宗之、韓延之等，棄城皆走，獨魯軌退保石城。裕令閬中侯趙倫之，參軍沈林子攻軌，另派內史王鎮惡，領舟師追休之等。休之聞石城被攻，擬與宗之收軍往援，哪知到了中途，遇軌狼狽奔來，報稱石城被陷，乃相偕奔往襄陽。偏偏襄陽參軍，閉門不納，休之等無可如何，俱西奔後秦。