胡峪乡在代县县城20公里，东接繁峙县境，南、西两面近邻枣林镇，北部山区与应县、山阴相邻。解放初属代县一区所辖，1953年建赤岸乡，1958属枣林公社，1961年成立胡峪公社，1984年建乡。2000年12月分水岭乡并入该乡。