陽江城東三里處原有一小山岡,約在鴛鴦湖以西,相傳古時王母曾經到此處停留過,故名之曰“王母岡”,是陽江古八景之一,美稱“王母仙蹤”。
後來,人們就在山岡上建起了一座王母殿,周圍種滿果樹花卉,成為一景。“王母岡”也因此而得名。王母殿前,刻有曾躍麟的一副對聯曰:“翠竹影搖湘浦夜;碧桃香靄武陵春。”清人馮蘭階亦有一聯:“不信瑤池嫌寂寞;愛從鼉海辟行宮。”前人還有不少詠贊的詩作,如“尋蹤何必向瑤池,東郭墦間尚有之”;“仙凡隔絕路難通,王母緣何此駐蹤”;“荒山有幸來仙駕,”等。
清道光十一年(1831),王母岡上建起了麻風院,從此遊人不敢涉足。清末民初,美國傳教醫生杜布森為那裡的麻風病人派藥治病,減輕了一些麻風病人的病痛。
1937年初夏,據說接到省上頭的密令,國民黨陽江縣駐防軍團長張壽,以派發救濟費為名,誘騙200多名麻風病人集中到王母崗,然後命令埋伏在四周的槍手開槍射殺,將殺死的麻風病人就地埋葬,並燒了麻風村。其它倖免的麻風病人聞風紛紛逃匿。王母岡上的廟宇也被焚毀,“王母仙蹤”遂成陳跡。