2001年9月区划调整析武阳镇熟溪以北，温泉路以西区域与桃溪滩乡合置壶山街道，并沿用至今。
原武阳镇1930年建镇，定名武阳镇。
1946年更名为壶山镇。
解放初称城关区。
1950年划建城关镇。
1956年城郊乡划入。
1958年公社化时称东风人民公社。
同年9月并入永康县，称壶山人民公社。
1961年恢复武义县建制设壶山镇人民公社。
1968年称壶山镇革委会。
1981年建制壶山镇人民政府。
1992年撤区扩镇并乡时，原白溪乡、溪里乡并入，再次定名武阳镇。
2001年撤销建制。
原桃溪滩乡，1934年属塔胜乡。
1946年并入家山乡。
1950年始建桃溪滩乡。
1956年与后树、中枢合并为胜利乡。
1961年成立桃溪滩人民公社。
1983年政社分设设桃溪滩乡，延续到2001年并入壶山街道。