正德十六年（公元1521年），皇帝陛下的车驾总算离开了江南，没过多久，便传来驾崩的噩耗。武宗皇帝没有儿子，也没有弟弟，大学士杨廷和在张太后的支持下，拥立兴王朱厚熜为新皇帝，改元嘉靖。这一年，我五十岁了。天子非常认可我平定宁王的功绩，封我为新建伯，进光禄大夫柱国，还兼两京兵部尚书，岁支禄米一千石；还想把我召入京城，委以重任，可是杨廷和等内阁大臣并不愿意，走到钱塘时，突然又有了旨意，说现在刚刚国丧，不宜有人事变动。过了几年，杨廷和在大礼议之争中下台了，新上来的张璁、桂萼也不认可我，他们更加信奉程朱理学，对我的才能也十分忌惮，嘉靖皇帝的想法也变了，他站在维稳的立场上，也更加支持程朱理学，而不是我孜孜以求的心学。从正德皇帝驾崩到去世，我再也没有机会前往北京。
不去也罢，我在江南专心讲学，也是乐在其中。嘉靖元年（公元1522年）二月，龙山公病逝了，我的内心受到巨大打击，五十年来，没有父亲的谆谆教诲，没有他为我提供的物质条件，我怎么会有今天的成就呢？举哀之日，我痛苦不已，原有的病情更加严重了。四年后，我的夫人诸氏也走了，我将她葬在徐山。礼部尚书席书向朝廷推荐我，说：“生在臣前者见一人，曰杨一清；生在臣后者见一人，曰王守仁”，最后杨一清入阁办事，而我却没有北上。