曾國藩自修身克己後，修養漸好，再加上刻苦努力鑽研學術，在文化氛圍濃厚的北京城，的確結交了無數朋友。
不過這些朋友除了穆彰阿之外，全無根底，都是來自五湖四海出身普通階層的人，曾國藩的圈子裏少有權貴階層的人。本來，權貴階層應該是做官者必須要主動結交的，可曾國藩非但不結交，反而義無反顧地把他們得罪遍。
事情起於琦善。這位貴族出身的公子哥憑借家族力量在二十歲時就當了河南巡撫，一度位極人臣，風光八麵。
琦善會做官也會做人，所以在朝廷中人緣特好，根深蒂固。鴉片戰爭期間，琦善是堅定的和解派，觸怒了道光，被革職抄家。但他的人緣太好了，一批一批的人保舉他，終於他重獲啟用，被派到甘肅蘭州擔任陝甘總督。
大概是在鴉片戰爭中懦弱的表現而被革職抄家，琦善受了嚴重刺激，一到蘭州就一反常態，重典治國，還將周邊本來安靜的少數民族首領誘殺，引起了不必要的麻煩。
意料之中地，有人舉報他這種瘋魔行為。鹹豐雷霆大怒，一麵罵娘一麵說：“長毛（太平軍）已把我搞得寢食難安，如果再被逼出叛亂，我還活不活了？把琦善這蠢材交刑部審訊！”
琦善一進刑部，曾國藩就發現了人緣的威力：會審官員隻問琦善些微不足道的問題，琦善保持著貴族風度，對答如流。
作為刑部副部長的曾國藩越聽越氣，當聽到會審官員要把舉報琦善的人捉起來審訊時，他怒發衝冠，對會審官員們說：“你們到底是在審案，還是在為罪犯開脫罪責？把舉報人當成罪犯捉來，根本不符合大清律例，你們難道不知道？”
審訊堂鴉雀無聲，琦善擺出他的滿洲肥佬做派，把腦袋歪成九十度，看向曾國藩，陰陽怪氣地問道：“您哪位？好大的官架子啊。”