公元前546年，由趙武和屈建主導、向戌牽線搭橋的弭兵運動進入了實質性的操作階段。所謂“弭兵”，就是收藏兵器，消除戰亂，呼籲天下各國和平共處。作為弭兵運動的序幕，這一年春天，晉國采取了非常措施，向齊、魯、衛三國歸還失地。
三年前，也就是公元前549年的夏天，齊國的大夫烏餘叛逃到晉國，將齊國的領土廩丘獻給了晉平公。那時候還是齊莊公當政，晉國和齊國處於敵對狀態，晉國對烏餘的叛逃持觀望態度，也沒有派兵接收廩丘。烏餘便成為了獨立於齊、晉之外的第三股勢力，他以廩丘為基地，襲擊了衛國的羊角（地名），又趁魯國沒有防備，攻占了魯國的高魚（地名）。
烏餘是一位久經戰陣的將領。進攻高魚的時候，正好天降大雨，魯國人以為他無法發動進攻。可他卻帶領部下赤手空拳地從城牆的排水孔鑽進了城，潛入到武器庫中取得了武器和甲胄裝備自己，然後登上城牆，殺死守衛的士兵，輕而易舉地占領了城池。
公元前547年冬天，趙武向晉平公建議：“晉國作為天下的盟主，諸侯如果互相侵犯，就應前去討伐，讓他們歸還侵占的土地。現在烏餘控製的幾座城邑，都屬於應該追討的那一類，如果我們貪圖它們，那就沒有資格做盟主了。請您主持公道，將那些土地歸還給它們的諸侯。”
晉平公說：“好，那要派誰去辦這件事呢？”
趙武說：“派胥梁帶去吧，他能夠不動刀兵就把事辦好。”
公元前546年春天，胥梁帶秘密召集齊、魯、衛三國軍隊，將他們帶到廩丘附近。又命令烏餘集合軍隊，出城接受晉國的封賞。烏餘不知是計，欣然出城。胥梁帶卻趁他不注意，突然逮捕了他。烏餘的手下群龍無首，又被諸侯的軍隊團團包圍，隻好棄甲投降。事後，胥梁帶將廩丘還給齊國，羊角還給衛國，高魚還給魯國，贏得了滿堂喝彩。