《台州府志·名宦传》载：“沈作宾，字宾王，归安（今浙江吴兴）人。淳熙十六年二月以承议郎知台州。首访民疾苦，驰盐禁，宽祖期，均徭役，更酒政，决滞狱，五十日间，尽除前政之不便民者，邦人胥悦，而前守嫉其胜己，巧媒蘖之，罢去。民请于朝，借留不遂，为立留贤碑。”当地百姓为纪念沈作宾专门在留贤碑畔建造了一座桥，桥名“留贤桥”。《赤城志》载，西留贤桥“在县西二十里，淳熙十六年（1189）为沈守作宾建。”后来这里居人渐多，形成了一个村庄，村以桥名。

2024年1月，入选浙江省第三批省级未来乡村名单。

2025年5月，被命名为2023年度内江市东兴区乡村振兴先进镇示范村（社区）。

2023年7月，留贤村被命名为浙江省“红色根脉”强基（基层党建）示范村（社区）。

2023年3月，留贤村入选浙江省第三批未来乡村创建村名单。

2022年12月，留贤村被确定为2022年度浙江省商贸发展示范村。

2021年12月，留贤村被命名为2021年浙江省卫生村。

2021年2月，浙江林业局公布2020年浙江省“一村万树”示范村，留贤村上榜。

2020年12月，留贤村被命名为浙江省2020年度“省级民主法治村（社区）”。

留贤村是临海市永丰镇下辖的行政村，城乡分类代码为121，为镇中心区。区划代码为331082108200，居民身份证号码前6位为331082。邮政编码为318000，长途电话区号为576 ，车牌号码为浙J。留贤村与浦叶村、下吴村、上郭村、沙头村、后郭村、杨杜村、坊前村、新四村、潘岙村、沙段村、方家岙村、尚贤村、茶寮村、永贤村相邻。历史沿革：建国初为八叠乡第一村；1959年建立留贤生产队，属八叠管理区；1961年改为留贤大队，属西郊人民公社；1966年曾改称红卫大队；1980年复称为留贤大队，属西郊人民公社；1981年成立八叠人民公社，属八叠人民公社；1984年3月改称留贤村，属八叠乡；1988划归城关镇；2001年属古城街道；2002年1月改属永丰镇。