秦始皇下山的时候，忽然来了一阵狂风暴雨，他连忙跑到一棵树下躲避。这棵树因为给秦始皇遮挡风雨有功，被封为五大夫。然后他又来到梁父山，举行祭祀，立碑刻下诗文。秦始皇沿着渤海向东行进，经过黄郡、腄郡，穿越成山顶峰，登上芝罘山。在那里他也派人立下石碑，刻下碑文，为自己歌功颂德。接着，他向南又登上了琅玡山。之后，他大设酒宴，举行丰富多彩的娱乐活动，在这个地方停留了足足三个月。
同时，他还迁徙3000多户百姓来到琅玡台安家落户，免去他们12年的赋税和徭役。秦始皇让人重新修建了琅玡台，树立起石碑，刻下碑文，颂扬秦朝的功德，表明他志满意得的心情。
秦始皇从东方巡游回来的时候，经过彭城，亲自斋戒，祭祀祈祷，想把当年掉落在泗水中的周朝传国宝九鼎打捞上来。结果他派了1000多人下去寻找，还是没找到，只好作罢。于是他继续向西南方向行进，渡过淮水，沿着长江来到洞庭湖。秦始皇乘船溯湘江而上，前往衡山、南郡等地。船行至湘山祠下，碰巧起了大风，江水汹涌，船只几乎不能前进。秦始皇认为这是神灵作怪，就问那些博士：“湘江的神灵是谁?”博士回答说：“传说是尧的女儿，也就是舜的妻子，她埋葬在这里。”始皇听了非常愤怒，于是就命令3000多个正在服刑的犯人把湘山上的树木全都砍光了，从此湘山变得光秃秃的，裸露着红色的土壤。然后，秦始皇巡视完南郡，从武关回到都城。