三国魏曹丕称帝时受禅于繁阳亭（今河南省临颍县境内），东晋时因南迁侨置在今繁昌境内而得名繁阳。
《繁昌县志》记载，汉代以前，这儿“江边荻芦丛生，凤凰矶、板子矶一带江狭水深，形成天然港湾，故名‘荻港’”。
北宋时期此地出了两名孙姓驸马，故得名。
古为南陵、芜湖间驿站，设兵铺，称平沟铺，简称平铺。
新港古称旧县镇，因镇政府驻地濒临长江中下游南岸，当时上有荻港，下有鲁港，后更名新港镇。
因境内有峨山，故而得名。