據傳,當年一位南嶽雲遊和尚化緣至此,看到一條身披佛光的金蛇盤踞於地向其示意,和尚便占卜尋由,卦象示意為南嶽菩薩化身,要他在此化緣修建南嶽行宮。
和尚會意,拜別金蛇,在方圓數百里範圍內廣為化緣,歷經數年,聚齊善款,破土修寺,又歷三年,鍾靈寺始告建成。整個建築由主樓和連為一體的二棟培樓組成,主樓為二層四棱八角,俗稱八角亭。蓋琉璃陶瓦,遠遠望去,但見金碧輝煌,飛檐翹角,好一派佛廟古剎氣派。近觀便見雕樑畫棟,香菸繚繞,美煥美侖。
整座建築與周圍山光水色和諧一體,不乏美學價值。據說,由於鍾靈寺的抽籤問卦、許願還香特別靈驗,因此,善男信女甚眾,每年八月十五是遊客和香客前來觀光還香的高峰期。