廟向東北,面闊三間,進深兩座,左右各為東西偏殿。右側還有碑屋、樓房、長廊等建築,依山修建,典雅莊嚴。廟的前殿類廡殿式頂,後殿為硬山頂抬梁式木架構,五架梁配以駝峰斗拱。天井間有兩小廊,四檁卷蓬頂,檐口滴水瓦,檐板飾花鳥、人物等木刻。前殿懸掛“魔障一空”木匾一塊,鐫刻於光緒十六年(1890),記錄著順德晚清期間辦理團練、護沙局等情況。
廟正殿為觀音堂,天妃、英烈祀於左右。右偏殿為東廟,左為西廟。三廟前均建香亭一座,中亭名“南海水月”,左右為“顯柏台”和“海天鴻庇”,(現已毀)按《錦岩志略》載,廟內有記事碑七塊,現僅存明代萬曆已酉(1609)、清代康熙壬申(1692)、雍正乙已(1725)、乾隆戊子(1768)、乾隆甲辰(1784)等五通,乾隆癸卯與道光辛巳兩碑,現不知失落何處。
為保存古建文物,1984年間,縣人民政府和鎮政府撥款重修,將錦岩山並人其內,增建了陳邦彥紀念堂,修建了崗頂的望月亭,闢為錦岩公園,占地面積達二萬平方米,供人遊覽。1991年5月,縣政府公布為文物保護單位。