村中一溪，樵夫赖以漂运木柴，故名柴溪，村由溪名。
2023年8月，被公布为2023年浙江省健康村样板。
2023年1月，宁波市民政局确认柴溪村为第五批宁波市完善型农村社区。
2022年12月，2022年度浙江省“一村万树”示范村公布，柴溪村上榜。
2020年12月，柴溪村入选2020年浙江省卫生村名单。
柴溪村是象山县西周镇下辖的行政村，城乡分类代码为220，为村庄。区划代码为330225102259，居民身份证号码前6位为330225。邮政编码为315000，长途电话区号为574 ，车牌号码为浙B。柴溪村与乌沙村、文岙村、官山村、港南村、勤丰村、蚶岙村、赖岙村、芭蕉村、横山村、尖岭头村、涧溪张村、蒙溪村、寒山村、尚瀛村相邻。历史沿革：解放前属宁海县大佳河乡，1959年11月由宁海民主管理区划入下沈管理区，1961年蒋家岙析出，分设4队，1963年合为柴溪大队，1983年改为村。
原属下沈镇，2001年6月属西周镇。
2020年象山县行政村调整时，蒋家岙村和万金山村并入柴溪村。
