呂布被張揚這一句話驚的出了一身冷汗，終日坐立不安，隻好一走了之。思來想去，呂布還是帶領著部下向東投奔袁紹去了。初時袁紹得知呂布來投，欣喜若狂，厚待與他，更將一郡縣也與了呂布，讓其駐兵。其後，田豐對其進言說道：“主公，呂布者虎狼也！若是讓其成了氣候，其必反撲！”袁紹心中猶豫，用書信試探呂布。
不日便得呂布回複至，心中隻稱袁紹婊子，袁紹氣怒，欲殺呂布。田豐又進言道：“主公，此事不妥。若是殺了此人，豈不叫天下欲投主公之人寒心？”袁紹聽罷大驚，向田豐問策，田豐深思一刻說道：“不弱假借聖名命呂布為司隸校尉，於半路殺之！”袁紹點頭允了田豐之言，書信一封讓呂布赴職，更拍了數千精銳“護送”。
呂布初時心中大喜，但是身邊張遼卻看著那些袁紹派來護衛呂布的精銳說道：“我等亦有軍士，豈讓其護送也？此必有詐！”呂布大驚，買通袁紹身邊之人，得袁紹欲殺自己的消息，連夜帶著兩萬餘並州精兵出走。袁紹兵多將廣，糧草堆積如山。呂布不想因此觸怒袁紹。
得知呂布星夜引兵離開，袁紹無奈作罷。如今呂布算是想明白了今天恐怕隻有張楊是真心待他，於是又複習投降張楊而張楊這個老實人也沒有計較呂布上次的不告而別，再度收留了呂布。
不久後曹操為報父仇興兵討伐陶謙，隻留荀彧、程昱等一幹人等，曹操麾下東郡太守陳宮不滿曹操重用寒門子弟，懈怠與世家，力邀張楊趁曹操後方空虛，攻之。張楊本無圖霸之心，但是呂布往來奔波數月，心中思定，欲尋一處安身，於是張楊贈呂布一萬兵，讓其取兗州安身。除開張楊之外，呂布在逃亡奔走之時，又識得一位好友，陳留太守張邈！
張邈亦屬曹操麾下，當日曹操好友鮑信力主曹操為兗州刺史，張邈見曹操軍士熊武，不敢造次。同為曹操麾下，陳宮與張邈也有數麵之緣，聽呂布之言後便前去說服張邈。張邈本就是恨袁紹、怕曹操、親呂布，心中猶豫，陳宮便言豫州刺史郭貢亦有攻曹之心，張邈一聽，便反了曹操。