據(jù)有只神羊，從金沙嶺上跑來(lái)此地，因環(huán)境不適，回頭走了，故名。又“回頭嶺”是王世杰的高曾祖父王恭元所取。王恭元在九江經(jīng)商途中，偶遇一個(gè)卜卦先生，約卜卦先生飲酒，酒至半酣，先生吟誦：“雨山一條龍，滴滴溚溚到金城，雄雞開(kāi)口天下唱，白馬回頭嶺。”話音剛落，便鼾聲如雷，第二天不知卜卦先生去向何方，后來(lái)王恭元到雨山，金城山仔細(xì)觀看，途經(jīng)白霓橋，借宿一位看山老人，入睡時(shí)便見(jiàn)一白馬飛奔而至，王恭元被驚醒，再入睡時(shí)又見(jiàn)白馬飛奔而來(lái)，饒山坡轉(zhuǎn)圈圈。第二天他回到赤壁神山，把卜卦先生的話和夢(mèng)見(jiàn)白馬的經(jīng)過(guò)向父親說(shuō)了一遍，第三天王恭元雇了四名轎夫把父親抬到夢(mèng)見(jiàn)白馬的山坡，仔細(xì)看了這里的山和水，覺(jué)得實(shí)在是一個(gè)好地方，回家途中老父親讓兒子扶著一個(gè)小山坡再回頭看看，見(jiàn)此，王恭元恍然大悟驚呼“父親，這就是回頭嶺”。