临武香花岭是因为这里长了很多桂花树,在临武方言里,桂花树就叫“香花”,故而这片山就叫香花岭。
相传,很久很久以前的尧帝时期,在辽阔的东海边,矗立着一棵神树扶桑,树枝上栖息着十只三足乌。它们同是玉帝的儿子,每日轮流上天遨游,三足乌放射的光芒,就是人们看见的太阳(所以太阳也称三足乌)。后来,十只三足乌不听玉帝的指示都抢着上天,天空中同时就出现了十个太阳,大地草枯土焦,炎热无比。人们只好白天躲在山洞里,黑夜出来觅食。猛兽毒虫借机残食人们,人类濒临灭绝的危险。消息传到天上,玉帝就赐给后羿(天上的神仙)一张红色的弓、一袋白色的箭,带着他美丽的妻子嫦娥仙子下凡到人间,一方面惩治妖魔怪兽,同时也教训教训他的这些太阳儿子。可这些三足乌根本不把后羿放在眼里,照样一齐上天逞威逞强。后羿大怒,选择背荫之处拉弓搭箭,瞄准太阳中心处的三足乌射去。他箭无虚发,一连射下九只三足乌。人们围着他连声喝彩。三足乌一死,火光自灭,人们顿感清凉爽快,于是欢呼雀跃。呼喊声传到天上,玉帝见九个儿子已死,大发雷霆,将后羿和嫦娥贬作凡人,不准再回天庭。同时也令仅存的这只三足乌日日遨游,不得休息。后羿和嫦娥呆在人间恩爱无比,但时间一长,艰辛难熬,心生厌倦,又担心像凡人一样变老死去;王母娘娘心疼自己的女儿嫦娥仙子,悄悄派人给后羿和嫦娥送来两颗仙丹,并再三嘱咐:每人吃一颗,可以在人间长生不老,相伴永远;一人吃两颗便只可一人升天。嫦娥犹豫矛盾了很久,最后决定自己先吃下两颗仙丹,升天以后再来解救后羿,于是嫦娥偷偷跑到了山顶,瞒着后羿吃了两颗仙丹,升天来到天庭,玉帝大怒,怒斥嫦娥背信弃义,并将她发配到月亮上的广寒宫,专作捣药仙子。于是嫦娥来到清凉寂寞的广寒宫,懊悔不已,终日与桂树和玉兔为伴,常常思念人间的后羿以泪洗面,面向他和后羿曾经恩爱幸福生活过的地方洒下桂树种子和思念的泪珠。从此,人间就多了一个开满桂花的山岭,这个地方就是“香花岭”,后人为纪念嫦娥,把她升天的山岭叫做“通天山”,嫦娥思念后羿的泪珠就化作了今天通天山珍贵的“香花玉”。