遺憾的是，擁護李唐的朝臣沒有明白其中的道理，因此無端掀起了一場政治風波，他們打擊的對象是張氏兄弟，卻把大火引到了自己身上。
長安三年（703）九月，武則天下詔：貶魏元忠為高要縣尉，將張說和高戩流放到嶺南。
武則天這樣處罰，已經默認魏元忠等人並非謀反之罪，而是借此機會在朝中立威，打壓朝臣的囂張氣焰。臨行之前，武則天破例召見了魏元忠。
魏元忠感慨地說道：“陛下，臣年事已高，此番前去嶺南，多半是不能回朝了，相信陛下一定會有想起我的一天！”
武則天：“愛卿何出此言？”
魏元忠用手指了指旁邊的張氏兄弟，一副指點江山的模樣：“陛下，這兩個兄弟，最終會成為禍亂的根由！”
武則天有點無可奈何，說道：“魏元忠，你還是離去吧！”
洛陽郊外，太子府的崔貞慎等人給魏元忠送行，遠處一雙眼睛緊盯著他們，魏元忠剛剛離去，武則天便接到了一份告密書：狀告魏元忠和太子府的隨從崔貞慎等人陰謀聚會，意圖謀反！據史料記載，告密之人是張易之本人，隻不過狀紙上寫的是柴明。
群臣跟著胡鬧也就罷了，可武則天很在意太子府的態度，如果背後是李顯指使的，她不介意再來一次政治清洗。這一次，武則天找來了監察禦史馬懷素，武則天說道：“有人狀告魏元忠和太子府的人勾結，告密書在此，證據確鑿，你迅速處理此事，將審訊結果給朕報上來！”
武則天的暗示已經很明顯了，而且還屢次派太監前去督促，可馬懷素就是不想誣陷，因此遲遲拿不出審訊的結果。洛陽宮內，武則天十分焦急，前往催促的宦官一批接著一批，可就是不見回報。
馬懷素直接找到武則天：“陛下，臣希望能和柴明當麵對質！”