王與準，王彥達之子，字公度，號遁石，《王文成公全書》的《世德紀》中收錄了國子監祭酒胡儼為其作的傳記《遁石先生傳》。王彥達將其父王綱遺留下的書籍全部傳給王與準，並告訴他說：“但毋廢先業而已，不以仕進望爾也。”
於是，王與準便閉門做學問，熟讀了祖父留下的所有書籍。當時鄉裏後進之士中有一些求學之人想拜他為師，王與準推辭說：“吾無師承，不足相授。”
後來，他來到四明山趙先生處學《易》。趙先生為他的氣節所打動，將本族的一位女孩許配給他，並勸他出仕為官。王與準對趙先生說：“昨聞先生‘遁世無悶’之誨，與準請終身事斯語矣。”趙先生聽完之後，頗感慚愧。
前文已述，曾有道士送給王綱占卜之書。王與準閑暇之時，也會捧起這些書，研究一下占卜之術，有時也會給人占上一卦，皆出奇的精準。後來遠近之人都來求他占卜，就連縣令也派使者前來，請他前往占卜，有時一日竟達兩三次。王與準最終厭惡至極，在使者麵前把占卜之書付之一炬。
“王與準不能為術士，終日奔走公門談禍福。”這一舉動招致縣令的憤恨，王與準隻好逃到四明山的石室中隱遁起來，一年多不歸。
當時朝廷正在征召全國的奇才，吏部使者來到餘姚，打算起用王與準，可是餘姚縣令進讒言說：“王與準以其先世嚐死忠，朝廷待之薄，遂父子誓不出仕，有怨望之心。”
使者聽後大怒，命人拘捕了王與準的三個兒子，並且派人入山搜捕王與準。王與準獲悉之後，就逃往更深的山中，不慎失足跌入山崖，腿部受傷，最終被抓獲。王與準雖然身受重傷，但是言行容貌似平常，這讓使者非常驚訝。王與準被抓後詳細敘述了自己焚燒占卜書籍、遁入山林的原因。使者明白了真相，釋放了王與準，並對他說：“足下不仕，終恐及罪，寧能以子代行乎？”