西山乡在县政府近效，直线离为300米左右，东与河东乡相接，南与越城镇相连，西接阳糯雪山，此与大屯乡、瓦岩乡相接，全乡幅员87.6平方公里，地形以山地为主，平均海拔约2500米。