史書記載：北宋皇祐元年（1049年），歐陽修自揚州移知潁州。熙寧四年（1072年），歐陽修以太子少師、觀文殿學士致仕，退居潁州，寓西湖六一堂。翌年四月，前副相趙概以八十高齡自南京（今河南省商丘市）來訪歐陽修，歐陽修就將六一堂西側的會客室加以整修，作為接待趙公的場所。時任潁州知州呂公著也前來看望。歐、趙、呂三人會於此堂，飲酒，賦詩，呂公著有感於二老相會為此堂題匾額日：“會老堂”。歐陽公即席賦詩：“…金馬玉堂三學士，清風明月兩閒人……”。詩中抒發了他與趙概莫逆之誼和對趙概不遠千里尋訪的感激之情。當年，歐陽修便終老於西湖居所。
會老堂在歷史上有過幾次大的維修，現保留有明清修湖建祠的碑記四塊，分別記述了歷史上歐陽公祠、西湖亭、西湖書院的修建情況。由於歷次黃河水泛濫侵蝕、自然老化，房屋曾破爛不堪，1982年初，省、地、縣分別撥款對會老堂進行維修。1991年（歐陽修四子歐陽卞後裔）亭孜村村民自己集資蓋了一層院房把其作為歐陽氏宗祠保護起來。目前，會老堂為縣級重點文物保護單位（1959年4月經阜陽縣人民政府）。
現會老堂為阜陽市潁泉區人民政府於2005年9月在原址、按原貌、用原材料恢復整修，磚木結構，明三暗五開間，梁枋雕刻精美，構圖古樸美觀，採用柱石斗拱承托，欞門花窗相襯，堂內兩月門，題額為磚雕“景賢”、“尚友”四字，堂內立有歐陽修石刻畫像，碑上清乾隆皇帝題詩和晁悅之、李叔端題字。院內有蘇軾的“和歐陽少師的會老堂次韻”碑刻等歷代即興題詩碑刻多塊，以及歐陽修與趙概相會的銅雕塑像。院中栽植有百年歷史的金桂和丹桂各一株，在每年的8-9月份，桂花盛放，香氣馥郁，周邊數里可聞。大院用仿古磚塊磊砌的院牆圍住，與歐陽修後代聚居地西湖亭孜村隔湖相望。院子四周繁花錦簇、翠竹環保，種植有大面積的紫薇、美國芙蓉、虞美人、鞭炮紅、荷花、睡蓮等，環境優雅。
會老堂是我省乃至中國文化歷史上一處重要的人文景觀，是阜陽歷史文化遺產核心與精神的重要組成部分。遊客在此可以感念歐蘇風情、感悟阜陽歷史文化的恢弘燦爛。
會老堂還是革命遺址，1928年4月7日，魏野疇為主導的中共皖北特委在此召開緊急會議，發動“四九”農民起義，並成立皖北革命軍事委員會，組成敢死隊，攻占阜陽城，從而點燃了轟動全國的“四九”暴動火焰，儘管起義最終失敗了，但“四·九”農民起義在皖北大地點燃了革命的火種，會老堂作為皖北革命的見證者，在黨的歷史上留下了光輝的一頁。
