要奪權，必須先趕人。
公元659年，李治的鐵杆支持者、禮部尚書許敬宗讓人密告，監察禦史李巢勾結長孫無忌謀反。李治說，既然這樣，你就和侍中辛茂將一起審查吧。
說長孫無忌謀反，當然是胡扯，所以許敬宗也不審了，直接上奏說長孫無忌謀反的苗頭已露，不能打草驚蛇，否則他若采取緊急措施，那就麻煩了，請陛下果斷一點兒，馬上下令把他抓了。
事實證明，李治是個表演天才，眼淚說來就來。他哭著說，我怎麽忍心給舅舅判罪，後人會怎麽看？許敬宗勸他，一個真正的明君，是會大義滅親的，比如當年漢文帝殺舅舅薄昭，不但沒有遭到詬病，“天下還以為明主之例”，有句古話可是叫“當斷不斷，反受其亂”呀！
結果，李治抹了把眼淚，連與長孫無忌對質的程序都省了，直接下詔削了他的官職和封地，發配黔州，兒子也被罷官除名，流放嶺南。
沒多久，李治又讓李、許敬宗複審長孫無忌謀反案，許敬宗派中書舍人袁公瑜到黔州審訊，他一到那裏，就逼長孫無忌自盡了。
如果不是李治授意，給袁公瑜吃兩個豹子膽，他也不敢這樣。
而褚遂良倒黴，比長孫無忌還早四年。他先是被趕出朝廷，貶為潭州都督，第二年又被調到更加偏遠的廣西桂州去當都督，同年被許敬宗、李義府等人誣告在廣西謀反。
李治確實“寬厚仁慈”，仍然沒有殺他，隻是這一次發配得更遠，把他趕到了今天的越南河內西南。兩年後，褚遂良死在發配之地。
越南那地方確實太難待了，淒慘地死去之前，褚遂良曾給李治寫信，希望看在他曾長期效力高祖和太宗、支持李治繼位也最堅決的分兒上，讓他離開這個鳥不拉屎的地方，但都無濟於事。