源芳乡在休宁县的东南方向，乡政府所在位置的坐标为。境内主要高峰为长岭尖海拔1297米，全乡5254.7公倾，其中竹林605.9 公倾，茶园 455公倾，其他林地4915.9公倾，耕地49.46公倾。