弘治十五年（1502），王陽明三十一歲。是年，他向朝廷上書，乞求歸鄉養病。獲得批準後，他回到家鄉餘姚，築室於四明山之陽明洞。
據《皇明大儒王陽明先生出身靖亂錄》記載：“洞在四明山之陽，故曰陽明。山高一萬八千丈，周二百一十裏，道經第九洞天也。為峰二百八十有二，其中峰曰芙蓉峰，有漢隸刻石於上，曰‘四明山心’。其右有石窗，四麵玲瓏如戶牖，通日月星辰之光。先生愛其景致，隱居於此，因自號曰陽明。”
大西晴隆介紹陽明洞說：
明人張鼎思的《琅玡代醉篇》卷三中引用了王陽明的再傳弟子薛應旂的一句話，“宛委山上有石匱，壁中有孔穴，號陽明洞，即《歸經》中所雲三十六洞天之十一洞天也。”
……
道教有十大洞天、三十六小洞天和七十二福地之說。洞天福地均為上天派遣群仙治理的地方。《雲笈七簽》卷二十七中收錄的“洞天福地部”中的《天地宮府圖》把會稽山洞定為三十六小洞天的第十小洞天，其中寫道：“會稽山洞周回三百五十裏，名曰極玄大元山，在越州山陰縣鏡湖中，由仙人郭華治之。”此外，《洞天福地嶽瀆名山記》中的記載和以上所述稍有差異：“會稽山極玄陽明洞天三百裏，在越州會稽縣，夏禹探書。”唐代學者李宗諤編修的《龍瑞觀·禹穴·天經》中也有會稽山洞的記載，他引用的是《龜山白玉經》中的“會稽山周回三百五十裏，名陽明洞天”。
前文所謂的“築室於陽明洞”，可能就是王陽明在會稽山山腳下搭了一個草堂。（大西晴隆《王陽明》）
在大西晴隆看來，“陽明洞”並不是指真的山洞。陽明洞共有三處，其中一處就是上文所言的四明山陽明洞。但是根據浙江省社會科學院陽明學專家的調查發現，陽明洞並不是位於四明山之陽，而是在四明山之陰，也就是現在禹王廟所在的位置。其他兩處陽明洞都是王陽明親自取的名字。