西山瑶族乡的名称源于其地理位置与民族构成，因地处灌阳县西部山区，且历史上是瑶族同胞的主要聚居地，故得名西山。

西山瑶族乡位于灌阳县西部山区，西与兴安县毗邻，西北与全州县接壤，北、东、南三面与县内的灌阳镇、新街乡、黄关镇、观音阁乡四个乡镇相邻。全乡总面积188平方公里，下辖李家、罗家、鹰嘴、盐塘、小源、南江、茶源、北江、下涧、大坪10个村民委员会，共140个村民小组。根据第七次全国人口普查数据，2021年该乡人口数量为8500人。全乡总人口中，少数民族包括瑶族、壮族、回族、仡佬族等，其中瑶族人口占比较高。

西山瑶族乡建于1957年，此后行政区划名称几经更改，至1984年10月恢复“西山瑶族乡”的称谓，并沿用至今。明清时期，此地属上乡归化；民国时期，属英俊乡；中华人民共和国成立初期，属黄牛市区。

该乡处于海洋山脉环抱之中，地势北高东低，海拔在400至1700米之间。因山多耕地少，素有“八山一水一分田”之说。境内自然资源十分丰富，森林茂密，森林覆盖率达77%。主要林产品有优质松、罗汉竹、紫竹、四方竹等，天然草场面积达15万多亩。矿产资源主要有铅、锌、钨、陶土等。境内水能资源丰富，总落差为1477米，水能总蕴藏量达2.74万千瓦。地下水资源中，矿泉水水质优良，属偏酸性、高硅、低钠、低矿化度，含有丰富的锶、锌、锂、氡、铁、硒等20多种对人体健康有益的微量元素，具有很高的开发利用价值。全乡共建有小水电站44座，总装机容量1.4万千瓦。

近年来，西山瑶族乡基础设施显著改善，实现了村村通四级公路、村村通高压电、村村通广播电视，并开通了移动、联通通信网络，7个行政村开通了程控电话。全乡旅游业蓬勃发展，山水秀美，风景奇特。主要景点包括佛教圣地高草禅林寺、桂北瑶民起义遗址五龙庙，以及五马山、盘王殿、火焰滩、二十四花凸、仙人下棋、三姐对歌台等自然与人文景观，是集观光旅游、避暑、休闲于一体的好去处。

西山瑶族乡在各项建设中成绩斐然。2017年12月，上榜广西自治区级生态乡镇名单；2021年5月，被命名为第五批广西自治区民族团结进步示范乡镇；2023年12月，被重新确认为广西壮族自治区卫生镇。此外，位于下涧村的轿顶山三十四师100团跳崖遗址，是灌阳县县级文物保护单位，具有重要的历史纪念意义。