进入洞内，他们迫不及待地问王阳明如何知道他们要来，如何知道他们都是什么样貌的。王阳明微笑道：“心清净了，自然能看得明白。”
从此以后，一传十，十传百，很快绍兴城内外，王阳明的大名无人不知。人们拿他当神仙，纷纷前来拜访。有问姻缘的，有求子的，有问前程的……王阳明不堪其扰，决意要离开这个清修之地。
不过，这段时间，王阳明的心静了下来。对儒释道三者有了更深的感悟。一种近似空灵的思维在慢慢地植入王阳明的脑中，至于什么时候显灵，还需要时间。
上有天堂，下有苏杭。弘治十六年（1503年）春，王阳明回到现实世界，把住所选在了杭州的西湖边。闲来无事，王阳明喜欢到处游逛。一日，他来到杭州西南在虎跑寺中。
寺中有一位高僧，据说已经闭关三年了，一句话也不曾说过。人们都认为这位高僧已经得道，已非尘世中人。王阳明却不这么认为，他想见一见这位高僧。人们都劝他别浪费时间了，高僧已经很久不见客了。