原名朱店，小桃溪朱氏思清迁居此地衍发成村，村外有一条宣平通往金华的古道叫做“金华大路”，心善的村民在路旁给过路的人提供茶水，时间长了，过路的人都知道了这里有茶有山，遂改名茶山。村庄发展后，部分村名在村上首建房居住，取名上茶山，部分村民在村下首建房居住，取名下茶山，原住址为中茶山。

2020年12月，茶山村入选2020年浙江省卫生村名单。

茶山村是武义县履坦镇下辖的行政村，城乡分类代码为220，为村庄。区划代码为330723101216，居民身份证号码前6位为330723。邮政编码为321000，长途电话区号为579 ，车牌号码为浙G。茶山村与叶长埠村、杨岸村、蒋村村、寺后村、履一村、莹乡社区、履三村、坛头村、郑村村、范村村、郭塘村、履二村相邻。历史沿革：茶山村在解放初建立茶山行政村。

1955年合作化时属幸福农业社。

1958年公社化属寺后管理区。

2018年11月村规模调整与陈家村合设茶山村村民委员会，并沿用至今。

原陈家村在1964年从淳安县陈家大队迁入武义。