王守仁天生有特殊的气质。他的母亲怀孕十四个月才分娩，在他诞生之前，他的祖母梦见天神衣绯玉，云中鼓吹，抱一赤子，从天而降，祖父遂为他取名为“云”，并给他居住的地方起名为“瑞云楼”。

王守仁5岁仍不会说话，但已默记祖父所读过的书。有一高僧过其家，摸着他的头说“好个孩儿，可惜道破。”祖父根据《论语·卫灵公》所云“知及之，仁不能守之，虽得之，必失之”，为他改名为“守仁”，随后他就开口说话了 。