清康熙十二年《富阳县志》附图载：聚溪，光绪十九年《浙江省全省舆图并水陆道里记》载：墅溪。
1950年为渔溪乡木桥村、大坞村和五岭乡狐岭村。
1956年为渔山乡万众高级农业社、曙星高级农业社、林峰高级农业社。
1958年10月为东风公社万众大队、曙星大队、林峰大队。
1959年初属里山公社，11月属太平公社，1961年初属里山公社，1962年3月属渔山公社，1984年3月为渔山乡万众村、曙星村、林峰村。
1950年渔溪乡人民政府建立，成立了大坞行政委员会。
1956年3月，五岭乡，渔溪乡合并为渔山乡，成立曙星高级社理事会。
1958年10月，渔山、里山两乡合并为东风人民公社，曙星、万众合并，成立了万众管理区。
1960年1月东风公社改为里山管理区管委会，原太平公社分建了曙星生产队。
1962年6月，渔山、里山分开，曙星、万众亦分开，成立了曙星生产大队。
1968年4月，成立公社革命委员会，曙星生产大队改为曙星生产大队革命领导小组。
1981年1月成立公社管委会，成立了曙星生产大队管理委员会。
1984年3月行政社分社，公社复称乡，生产大队改为行政村，成立了曙星村民委员会；1950年10月渔山乡人民政府建立，成立前大庵村行政行政委员会。
1956年3月，五岭乡，渔溪乡合并为渔山乡，成立林峰高级社理事会。
1958年10月，渔山、里山两乡合并为东风人民公社，成立了林峰管理区。
1960年1月东风公社改为里山管理区管委会，原太平公社分建了林峰生产队。
1962年6月，渔山，里山分开，成立了林峰生产大队。
1968年4月，成立公社革命委员会，林峰生产大队改为林峰生产大队革命领导小组。
1981年1月成立公社管委会，成立了林峰生产大队管理委员会。
1984年3月行政社分社，公社复称乡，生产大队改为行政村，成立了林峰村民委员会。
2007年12月富阳市行政村规模调整后，由原万众村、曙星村、林峰村合并为墅溪村，具体历史沿革参考万众，曙星，林峰自然村沿革资料。