慈雲寺,原名大川寺,唐廣德間(763~764),由檮樹禪師於大川山建寺。曾有“唐大川千秋一色,宋慈雲古今同揆”對聯,所謂“唐名大川,宋改慈雲”即指此。日本國繪製的《湖南地方禪宗の地圖》(唐五代),記有大川山名,該寺香火延至民國末年。
宋代普濟和尚所著《五燈會元》一書,曾提及大川禪師。大川系六祖三代孫,福建人。他的法嗣有兩個,即仙天禪師和福州普光禪師。他是從南嶽希遷大師處開悟後來到大川山建寺的。
民間傳聞,檮樹祖師初來大川山時,只在一棵大檮樹下參禪。某日去異地傳法,將衣缽寄於檮樹洞穴中,七日後歸來,取出衣缽,半缽飯仍未餿,祖師認為此地吉祥靈異,即於此搭建茅庵。又傳聞,大川曾在寺前岸邊親手植下兩株銀杏(又名白果樹),千百年來兩株銀杏長得挺拔茂盛。至解放時,樹冠罩地兩畝余,樹圍達九尺,成為鎮寺之寶。1952年8月間,兩棵古銀杏被砍去做槍托把子,給當地留下一樁憾事。