1998年，四会市人民政府根据中共广东省委、广东省人民政府《关于理顺我省农村基层管理体制的通知》（粤发〔1998〕14号），撤销榄岗管理区设立榄岗村民委员会。因村委会驻地位于榄岗村，故名。

榄岗村委会座落在江谷镇的北部，省道四清公路旁，距墟镇3公里，辖区面积4.2平方公里，下辖19个村民小组，总人口1939人。榄岗村委会地势平坦，以香蕉、柑桔基地为主作，盛产香蕉、沙糖桔。榄岗村委会是木制品加工的聚集地，其木制品特别是木铮手工制作业，历史悠久，其产品远销省内外。榄岗村与江和村、新屋村、旺塘村、黎寨村、大垌村、培崀村、马岗村、田心村、清平村、冼田村、江谷社区、江林社区、镇郊村、竹寨村相邻。荣誉排行：

2026年1月，获评广东省第二批“百千万工程”典型村称号。

2019年9月，榄岗村上榜2018年广东省“民主法治示范村（社区）”创建单位名单。

历史沿革：民国时期江谷镇属广宁县管辖，1954年7月划入四会县管辖。

1958年设榄岗生产大队，1983年设榄岗乡，1987年设榄岗管理区，1998年设榄岗村委会后名称沿用至今。