靈山寺塬名明山岩，初傳龍法師來此以家產購地建一小竹屋，繼而村民張火炎居士獻地，莊有同、楊德發、王德安、王添賜、林杉河、余清標、徐阿向、黃金凱、廖湳泉、李樹、陳臨、陳有德等諸大德戮力同心護持於後山增建一小佛殿。
民國四十叄年，住於關西潮音寺之德妙上人云游至此。傳龍法師、妙慧居士與眾村民為令靈山寺之能有所發展，遂聘請上人為住持，由其策劃建築一宏偉之道場，以行弘揚佛法之大業 。
民國四十七年開工，經上人與兄弟姊妹，四眾弟子多年之胼手胝足含辛茹苦，終建成一規模頗鉅之莊嚴佛剎，俾使四眾弟子有一安心修行，努力向道之優良環境。
上人認為佛寺之目的，對內要使住眾能相互薰陶、清淨和樂、功隨法行，共向菩提;對外要負起宏法利生，以佛法教育社會民眾之責任。故建築不以富麗堂皇、招徠遊客而成觀光地區;主要惟以能地盡其利、人盡其才、發揮寺廟應有之自利利他、先覺覺後覺，覺覺不已，務期正法永住為宗旨。
名間靈山禪寺