王华冷笑：“你老子我是秀才，圣人说过的每句话我都背得滚瓜烂熟，我怎么从来没有听过圣人让人鼓捣象棋的话？”
王阳明摇头晃脑地说：“您说象棋是‘小技’，但孔夫子说过，即使是小的技艺，也一定有可取之处（”虽小技，必有可观者焉“）。这不是告诉人们，可以钻研象棋这种小技吗？”
王华被气得胡子抖了两下，说：“你断章取义的功夫还真不错。孔夫子这句话下面还有句话，你可记得？”
王阳明当然记得，但他摇头。
王华冷笑：“真是学艺不精。孔夫子下面的话是：但对远大的事业恐怕有影响，所以君子不从事这些小技艺（”致远恐泥，是以君子不为也“）。”
王阳明假装恍然大悟：“孔夫子是个性情活泼的人，他肯定支持人钻研小技。后面那句话大概是后人加上去的，应该不是孔子的话。”
王华的胡子又抖了起来。
王阳明的母亲没有闲工夫和他斗嘴皮子，索性趁他睡觉时把他的象棋扔到了水里。小王阳明悲痛不已，还做了首诗来描述象棋的“凄惨”命运：“象棋在于乐悠悠，苦被严亲一旦丢；兵卒坠河皆不救，将帅溺水同时休；车马千里随波去，相士和川逐浪流；炮响声音天地震，象若心头为人揪。”
这并未摧折王阳明喜欢钻研的心，他很快就把象棋的事忘到脑后，又一头钻到了道教的养生术里。
父亲王华再次吹胡子瞪眼，母亲严肃地站在了王阳明面前。王阳明只好乖乖地将关于养生术的书籍束之高阁，但只要父母不注意，他就会像做贼一样偷偷地阅读。好在他很快就从养生术中走了出来，又开始舞枪弄棒。
王华看着这个孩子，唉声叹气。唯一支持王阳明“为所欲为”的只有他的爷爷王天叙。这是位和蔼的老人，饱读诗书思想开放，允许年轻人按自己的想法去行事。正是在王天叙的保护下，王阳明才充实了自己丰富多彩的少年生活。
随着年纪的增长，王阳明的心越来越野，越来越让当时的人不能接受。1482年，王阳明的父亲高中状元在北京获取官职。十一岁的王阳明和爷爷王天叙从浙江余姚前往北京。途经镇江时，王天叙被他在镇江的诗友挽留，一行人游览金山寺。
游玩进入高潮时，有人提议以“金山寺”为名作诗。当大家都在冥思苦想时，王阳明已挥笔而就，这首诗是这样的：“金山一点大如拳，打破维扬水底天；醉倚妙高台上月，玉箫吹彻洞龙眠。”