因村庄内有一座琴行的山旁，名琴山，后谐音名为岑山，故而得名。
2026年3月，被认定为广东省第三批“百千万工程”典型村镇。
2019年10月，岑山村入选2019年广东省卫生村名录。
岑山村是高州市东岸镇下辖的行政村，城乡分类代码为122，为镇乡结合区。区划代码为440981128211，居民身份证号码前6位为440981。邮政编码为525000，长途电话区号为668 ，车牌号码为粤K。岑山村与东坡村、甘川村、旺村坡村、郑村村、大简村、旺坑村、谈朋村、河朗坡村、横山村、大双村、麦坑村、才口村、石陂村、双利村相邻。历史沿革：1958年属东岸公社岑山管理区，管辖东坡、甘树等大队，1959-1960年由岑山、东坡、甘树、大坡等组合成立岑山大队，1961-1962年分为岑山、大坡、甘树、高车、东坡五个大队，1963年大坡岑山合并为岑山大队，1983年改为岑山乡，1986年改为岑山农村管理区，1999年改称为岑山村民委员会，沿用至今。
