歷史記載
《八閩通志·山川》載：“歸仙嶺在善化里。按舊志名孤單嶺。唐陳乘、陳光義居嶺畔，登第返鄉，改為今名。”《海錄碎事》云：“嶺不連諸山，為孤峰”。相傳這個山峰為貴峰，是出狀元王侯之福地，但因山麓出泉口風水被人所破，只能出小官了。方言順口溜說：“貴人入嶺西，菩薩來爭地。”據說宋時嶺上已建有九仙閣，奉祀九鯉湖仙公，因而一度名曰仙公嶺。後來，又建觀音亭，為過路人歇腳、喝水。林師益，仙遊龍華人。宋欽宗靖康初，授京畿第一正將，驍勇無敵，屢次打敗侵犯的金兵。他誓死保衛國都，在一次激烈的戰鬥中為國捐軀。其妻子和剛周歲與九歲的兒女，歷盡千山萬水，流離五六載，回到仙遊後，為追念丈夫的英烈，刻木為魂體，葬在歸仙嶺上。後有人題其墓曰：“虎踞龍盤經幾春，靖康孤節映蒼旻。至今凜凜有生氣，愧死當年膜拜人。”
明尚書鄭紀的母親吳氏，是大濟下槐堂人，自幼經常跟著娘親路過歸仙嶺，長大後度嶺時題詩云：“此地今名歸仙嶺，我今是仙不是仙。短筇拄石雲生足，破帽籠頭雪滿巔。曾瑟閒彈四五曲，陶詩漫和二三篇。百年此雲無多日，哪管兒孫乏社錢。”卓晚春是明嘉靖年間（1522－1566）莆田一位濟公式人物，其道術高明，在莆民間廣為流傳，信仰者多。有一年，他發現歸仙嶺頂草叢中有“飛爐顯聖”奇蹟，在善男信女的大力支持下，蓋了一座神廟，自己還親手寫對聯：“歸真有路明心性，仙境無蹤悟本源。”現有這座歸仙閣，於康熙三十九年（1700）由文殊村舉人廣望重建（在卓氏真人舊基上），對聯寫道：“卓祖飛爐開勝景，何仙置跡建新居。”公元2000年前後，嶺上又新建一座會仙祠，與養心亭、歸仙閣排成一字形，蔚為雅觀。
交通咽喉
1949年4月，嶺西遊擊隊攻打潭邊警察所，橄欖嶺是十分重要的交通咽喉。縣自衛隊和潭邊警察所早已派兵在橄欖嶺至縣城這段公路加強巡邏。21日、22日兩天，游擊隊約70人在劉佐周、吳步玉、林椿華指揮下，包圍了警察所炮樓，並用火燒，炮樓里20多警兵驚恐萬分，向橄欖嶺方向逃竄，嶺頂自衛隊用機槍阻擊，警兵丟下幾具屍體後慌忙往縣城逃去。游擊隊拔掉了國民黨的地方勢力武裝據點，解放了嶺西。劉佐周又派一支游擊隊扼守橄欖嶺，以防反撲，鞏固了勝利成果。歸仙嶺上滿山遍種巨尾桉，濃郁蒼翠，一片欣欣向榮景象。
