武宗皇帝果然發旨召王陽明先生麵見。張永敬重王陽明先生的人品，又憐王陽明先生之忠，暗地裏遣人星夜飛馳通報王陽明先生，揭穿那三人的陰謀。
王陽明先生得詔，即日起馬，行至蕪湖。張忠聽聞王陽明先生到來，害怕皇上召見時王陽明先生有所啟奏，於是遣人假冒聖旨阻止他前來。
進退維穀
王陽明先生在蕪湖停留了半月時間。一夜默坐，聽水波拍岸之聲，他歎道：“若隻是自己一個人蒙受謗毀，死就死了。可是丟下老父親一人怎麽辦呢？”於是他就對門人說：“此時如果有一辦法可以帶著我的父親遠離這是非之地的話，我一定會去做而且不後悔。”
王陽明先生進退維穀之中，不得已入九華山，每日端坐草庵中養氣修身。一日微服重遊化城寺，路過地藏洞。回顧自己27歲時，於此洞見老道，兩人共談三教之理。不覺然今年已經49歲，恍惚間光陰流轉了二十二年，功名霸絆不得自由。進不得麵見聖上，掃除奸佞；退不得歸臥林泉，專心講學。王陽明不由自主地淒然長歎。
又見山岩中有僧危坐，他便問道：“何時到此？”
僧答道：“已三年了。”
王陽明先生說道：“吾儒學道之人，若肯如此精專凝靜，何患無成？”
吟一詩雲：
莫怪岩僧木石居，
吾儕真切幾人如。
經營日夜身心外，
剽竊糠粃齒頰餘。
俗學未堪欺老衲，
昔賢取善及陶漁。
年來奔走成何事，
此日斯人亦啟予。
張忠等既阻王陽明先生之行，又反奏王陽明先生不來朝謁，其奸邪實在可憎。
武宗問張永，張永密奏道：“王陽明已到蕪湖，卻為江彬等所阻攔。陽明是位忠臣。今聞眾人有爭功謀害之意，打算棄其官入山修道。此人若去，天下就更無肯為朝廷出力的忠臣了。”武宗感動，於是降旨，命王陽明先生兼江西巡撫，克期速回理執事務。