聚落呈塊狀。昔時因發祥於制針手工業，有“金溝墘”之稱。高義居林、楊二姓，林為主姓，占全村人口80%。南宋紹興年間(1131~1162),林氏始祖由福建蒲田松潭鄉石獅巷遷此創鄉。有“松老分枝茂，潭深沛澤長”的冠首傳世。因村落創於大溝之旁故名溝墘，後睢稱“高義”。
高義地處韓江西濱，自清道光十七年(1837)至同治三年(1864)，由於南堤西岸多次決堤，耕地被埋於沙層下面，經幾十年的搬沙整地，堆成幾十個沙堆，其覆蓋面積達70多畝。耕地均為沙質土，沙質層深達1.5米以上。加之旱澇災害，時常歉收失收。民謠說，“三日無雨鳥餓死，一場大雨浮屎桶”。1951年興修水利，利用惠民涵引韓灌溉。1952年後，經十餘年平埔整地，搬沙改土，修建浮水溝，興建水泵站，實現電動排灌。
清光緒27年(1902)，已有幕花(又稱玩記)、賢記兩書齋，學生40多人。1939年，先後有廣德、崇德、培材、育才四所學堂，學生100餘人。建國後稱高義國小。1979年創辦高義联中。華僑多居馬來西亞、新加坡、及港澳等國家和地區，計600多人。
