黄姓从福建莆田迁居至此，得名黄家山。因村委会驻于黄家山，故名黄家山村民委员会。
黄家山村是广丰区少阳乡下辖的行政村，城乡分类代码为220，为村庄。区划代码为361122206205，居民身份证号码前6位为361122。邮政编码为334600，长途电话区号为793，车牌号码为赣E。黄家山村与交溪村、泉岭村、新塘村、养塘村、双塘村、少阳村相邻。历史沿革：1949年前属枧溪乡第一保，1950年属吉岩区大溪乡。
1955年属枧溪区，1958年为屏阳公社大洋大队，1964年改为黄家山大队，1966年改为向阳大队。
1972年复属屏阳公社，大队名称未变。
1984年撤销向阳大队设立黄家山村民委员会，驻地黄家山。
