光绪《慈溪县志》载：黄山，西屿乡右安仁里安仁村11都1图3图。
据《慈溪王氏宗普》载：先祖籍山西太原，建炎南迁，先居慈城，其第五世再迁黄山。
王氏是慈城地区的望族，自宋至清共出进士36人，官至尚书、都御史、寺副、知府不等。
村名一直沿用，1949年前为江屿乡十八村，1950年为黄山乡八村，1955年为建新低级农业社，1956年并入联勤高级社。
1961年改为乍山公社黄山大队，1983年改为村委会，1992年为慈城镇黄山村委会，村委会设在黄山自然村。
名称一直沿用至今。