1949年前为上岩西乡第五保辖。
1951年改第五保置为村。
因境内多香楠树故取香楠为村名，因析上岩西乡北部置猴栗乡而随划。
1952年春，废猴栗乡入上岩西乡，村复归。
1953年1月，复置猴里乡，村又被划属。
1958年分出东部置富山大队后，改称香楠大队。
属猴里人民公社。
1981年地名普查时，更公社名为猴狸，香楠大队仍属。
1984年1月，改公社为乡，香楠大队也同时改称香楠村，同时设立香楠村村民委员会，隶猴狸乡。
1985年更猴狸乡名猴栗乡，村仍隶。
2001年随猴栗乡并入黄家镇，2003年12月村组调整时由原香楠村、富山村、萤河村组建为香楠村，隶属黄家镇，沿用至今。