米芾和別人不一樣，對當官一點兒都不感冒；反正他也不想好好幹活，對份內的事從來就是吊兒郎當。
米芾在江蘇漣水當地方官時，離安徽靈璧很近；靈璧出產的靈璧石是有名的玩石，正是米芾所喜好的。
米芾不正經上班，到處搜集靈璧石；然後整天躲在畫室裏賞玩，他一進畫室一整天不出來；連到單位打卡簽到都不去。
上司楊傑跑到米芾那兒說，你小子什麽意思；不想幹了是不是?
米芾不回答，從袖子裏拿出一塊玲瓏剔透的靈璧石給楊傑看：這樣的石頭怎麽能不喜歡?
楊傑不理他，米芾又拿出一塊來，楊傑還不理。米芾最後拿出的一塊有鬼斧神工之妙，還是那句話：這樣的石頭怎麽能不喜歡?
楊傑再也忍不住了：不光你喜歡，我也喜歡。一把搶過石頭，出門上車就走。
但不是所有上司都不會像楊傑那麽好糊弄。米芾曾經負責過漕運，上司張勵對他的玩世不恭很不待見；想起來就拎他來訓一頓話，弄得米芾非常不爽。
不久大奸臣蔡京當了宰相，米芾和蔡京關係很鐵；就悄悄派人到京城請蔡京把自己的職務調成跟張勵平級，蔡京一切照辦。
米芾拿到任命書，興衝衝地連夜親自動手做了一張新名片；淩晨就咋咋呼呼地衝進張勵的辦公室。
張勵吃驚不小，不明白出了什麽事。米芾把自己的新名片甩給張勵，說以後咱就平起平坐了。
張勵這才回過味，氣得半天說不出話來。
米芾走後，張勵才跟旁邊人說：米芾這小子渾身都是毛病，今天在這裏大發作了。
米芾有嚴重潔癖，平生從來不用別人用過的東西。他曾經當過太常博士，負責皇家宗廟的祭祀事務，祭祀時穿的標準工作服他當然嫌髒，就玩命地洗，連工作服上的花紋都被他洗掉了。因為這個，米芾受到降職處分。