亦作逥山，俗称余商，四面山丘逦迤，多条涧坑流进，村处四围山水之中，故名回山。另一作逥杉，《民国新昌县志》载因杨杉迁居于此得名。

回山村位于新昌县西南部，距县城49公里。俗称余商，是回山镇最大的行政村。现有耕地1328亩，山林1899亩，茶园637亩。回山村的老屋依坡而建，择吉而居，顺应自然，落差达50米，从高墩往下看，错落有致的黑瓦楞屋顶、风火墙，就形成了一副别有风致的水墨画。回山村四面山丘迤逦，多条涧坑流进，村庄处于四围山水之中，故名回山。回山古时还有一个好听的名字“彩烟”。居住的多数是杨姓人家。元至清属彩烟乡，民国二十四年属回山乡（镇）至今。2004年6月，回山村和姜岙村合并，村委驻地在回山村，现有17个村民小组，1759人。回山村与新天村、上市场村、上下西岭村、官塘村、高湾村、柘前村、大宅里村、下岩村、上下宅村、岭山村、新市场村、袁家村、蔡家湾村、大安村相邻。荣誉排行：

2023年1月，浙江省农业农村厅、浙江省乡村振兴局将回山村纳入2022年浙江省乡村振兴示范村创建名单。

2021年11月，浙江省民政厅确认回山村为第四批浙江省省级引领型农村社区。

2021年2月，浙江林业局公布2020年浙江省“一村万树”示范村，回山村上榜。

2020年12月，回山村入选2020年浙江省卫生村名单。

2019年12月，国家林业和草原局公布第二批国家森林乡村名单，回山村榜上有名。

2016年12月，回山村被列入第四批中国传统村落名录。

历史沿革：清代属彩烟乡，民国24年属回山乡。

1958年为回山公社回山生产队。

1983年设回山乡下山村委会。