这事最终因无证据，成了莫须有的指控，但牵涉其中的唐伯虎，后半生命运已被改写。
同年，预言唐伯虎人生不顺的文林，因病死在温州知府任上。文林看不到儿子文徵明一生所达到的成就，但在自己的身后事上，他若能感知儿子的处理方式，一定会含笑九泉的。
按照官场惯例，死在任上的官员，地方会负责丧葬费用，当地官绅也会送来赙仪，加起来达数千两银子。这笔合情合理的收入，对于缓解父亲一生清廉造成的家境窘迫，以及顺利办理丧事，均十分必要。但是，文徵明断然谢绝了这笔收入。他专门写了一封答谢书，解释说，我父亲在贵地做知府，从未贪过公家一分钱，他走得堂堂正正，今天我若收下大家的贡献，就是辜负了父亲一生为官的清白。利用死去的父亲之名，为自己谋利，我不忍为。就算自己再没出息，我也不会让父亲在名声上蒙受污点……温州人见到文徵明如此坚持，觉得他很愚笨，但又很佩服。最终大家用这笔钱在当地修了座亭子，叫“却金亭”，以表彰这对父子。
