平定冠山冠山初有名聲，可能是在唐宋之際；名聲漸次大起來，大到讓世人刮目相看，應在元代以後。其原因是元明兩季平定州地面上出了兩位卓有聲譽的大才子，一位是曾在元代歷任國史院檢閱官、翰林院編修、中書左丞和監察御史並參與編修過遼、金、宋三史的呂思誠，另一位則是在明代任過禮、兵、吏三部尚書和太常寺卿的喬宇。歷史上冠山的幾十處名勝景觀中，即以冠山書院、夫子洞和仰止亭等與呂思誠、喬宇的生平有密切關係者最為知名。
我們現在仍可見到的冠山書院為明清兩代多次重修後形制，它坐西朝東，背山面谷，內外兩重院落中多為石券窯洞建築，雖窯面以青磚掛麵，窯頂也作仿木構築，但古今世人仍然以洞命名它們，如崇古洞、無梁洞等等。傳說此書院就是呂思誠和他祖父三代讀書之處。當地舊方誌中記載說，冠山書院最初又稱冠山精舍，興盛時書院中曾建有燕居殿，殿中設孔夫子像，並有顏回和曾參二人之像相配祀。當時書院中的藏書數量達到了萬卷以上，官方設定專門人員予以管理。
冠山書院中現存明清兩代碑碣石刻還有不少，如汪藻的《冠山名賢書院》詩碑、陳鳳梧的《游冠山書院》詩碑、孫毓芝集柳玄秘塔五言詩刻石、喬宇的《雪中訪左丞呂公書院舊址》詩碑、白金的《新建高嶺書院記》碑和傅眉的五言詩刻石等等，其中喬宇詩碑最被後人稱道。喬宇詩曰：“峻岭崇岡冒雪來，冠山遙在白雲隈。松盤厚地蜿蜒出，花散諸天縹緲開。傍險欲尋歸隱洞，凌高還上讀書合。平生仰止鄉賢意，莫遣遺蹤閔草菜。”此詩寫情寫景，情景並融，雖然措辭恬，然而發自內心，屬於詩人的真心境。
喬宇在明武宗正德元年（公元1506年）時，曾經奉詔代表朝廷回到山西以太常寺卿的身份祭祀中鎮霍山，其間幾乎走遍了當時的三晉諸州府，留下了一大批記述山西各地名勝的詩文，對後世產生過頗大的影響。《明史》本傳中稱他“詩文雄鐫，兼通篆籀，性好山水，嘗陟太華絕頂”。可見此人也是一位像元好問那樣的“愛山愛徹骨”的山水才子。史稱喬宇原籍於東平（今昔陽縣）洪水村，從洪水村到平定冠山大約50公里的路程，對500年前的古人來講這是一個很大的距離，然而傳說喬宇少年時也曾讀書於冠山書院，這從另外一個角度說明了冠山書字在當時當地的名氣之大。看喬宇這位古人與冠山的關係，最讓人忍俊不禁和吃驚的是一段所謂“喬尚書冠山戀狐仙”的動人故事。傳說喬宇在冠山刻苦讀書，一日竟感動了山間的狐仙。於是狐仙變作美女，
平定冠山充滿了一種書卷與書香之氣。從元代至清代，它的懷抱中竟留下了如此眾多的學者足跡。至本世紀初，冠山大地上又走出了一位著名女作家石評梅（太原道註：有關石評梅參見本站晉陽書屋之風流才女石評梅傳）。評梅女士的許多作品中有一篇叫作《紅鬃馬》的短篇小說，即以家鄉冠山作為背景。小說中有這樣一些細膩的描寫：“……走過了石坊不遠便到了廟前，匾額寫著資福寺，旁邊有一池清泉，碧澄見底，岩上傅青主題著‘豐周瓢飲’四字，池傍有散發古松一株，盤根錯節，水乳下滴，松下纏繞著許多女蘿。轉過了廟後，渡一小橋是槐音書院，因久無人修理已成廢墟，荊棘叢生中有石碑倒臥，父親嘆了口氣，對我說這是他小時修讀書之處。再上一層山峰至絕頂便到了冠山書院，我們便住在這裡……”
正如傅山先生之子傅眉在冠山的一首五言詩刻中所吟頌過的：
但是陂陋石，唐頹總可人。
風雨容磊落，煙雨滲精神。
冠山之石仍然秀拔，冠山之松依舊虬勁；傾圮的也許永遠只是一種歷史的表像，而冠山留給後人的卻是那風雨摧不去、煙雨迷不住的千年書香。冠山書香當然也會使今後的世人在此駐足、沉思，擬或像評梅女士當年那樣，便在冠山住上幾日，去感受貪圖一番可人的冠山書香。
2008年5月12日，冠山書院被命名為平定一中傳統文化教育基地並舉辦了大型書院文化展覽，此後每年農曆四月初八為“書院文化節”。平定籍中國楹聯學會會員王世茂先生先後題聯10副：
·2010題冠山山門
千古書香流聖澤
四時物色耀文光
·2010題崇古書院大門：
冠山文脈千秋景
三晉書香第一門
·2010題崇古書院二門：
前聖后賢同脈胳
開來繼往共流行
·2008冠山書院文化展宣傳聯：
聖地多嬌 百年老校登百尺竿頭 騰雲駕霧
冠山煥彩 千載文光沐千家學子 嘯月追風
·2008二門外豎標：
古今尊至聖 風行文教
中外仰先師 雨化英才
·2008題《書院滄桑》展室：
官也辦 私也辦 八百年書院兩辦並舉
山有脈 水有脈 千餘載文風一脈相傳
·2008題《古州名賢》展室：
千年書院清味永
文獻名邦俊彥多
·2008題冠山文化展：
孔子心 老子心 釋子心 心心相印
儒之教 道之教 佛之教 教教善行
·2008 題崇古書院大門：
冠山文脈千秋景
三晉書香第一門
·2008題崇古書院二門：
百年學府尋根遠
千載書香繼世長
