据1931年,为慈溪县灵麓村,后为灵阳乡五村,旧属费市乡第五保,1953年互助组,1954年民主社,1956年称鞍山第四高级社,1958年属东风人民公社第二营第五连,1961年属费市公社,1983年为费市乡灵山村委会,1992年并入庄桥镇,为庄桥镇灵山村委会,2004年拆镇为街道,现为庄桥街道灵山村委会,有孟字门头苏家、庙下陈、后苏、横路陈(双余、吕家、方家横屋因建造灵山嘉苑已拆迁)四个自然村和灵山嘉苑一期、二期两个小区组成,村委会设在灵山佳苑一期。
境内有灵山禅寺、宁波市地震台、灵山公墓等。
名称一直沿用至今。