传说此地原为一海，芦芽山有一对水鸟，鸟叫则水涨。水从四面汇合于此，人们称这里为“湖汇”。后来这对水鸟被猎人击毙，从此水干海枯。人们在此建村后，便取村名为胡（湖）会（汇）。另有传说，前人视此地宽阔，欲在此建成，测定方位、定好碑桩，却被狐精把碑桩拔在现五寨城驻地。人们便说此地被狐害了，以后起名“狐害”，后雅化为“胡会”。

胡会乡位于山西省忻州市五寨县中部，距县城10公里，是五寨县辖乡。1958年设胡会公社，1984年建乡。全乡面积87.9平方公里，人口约0.7万。农业以种植土豆、莜麦、豆类为主，是当地传统的粮食产区。辖区内地形较为开阔，属典型的黄土丘陵地貌，适合旱作农业发展。

胡会乡现辖16个行政村，包括大胡会、小胡会、西鸡儿洼、东鸡儿洼、石嘴头、张家坪、桑家洼、前赵和庄、东坪、夏家洼、包家湾、安子、川口、方城、水槽、王家庄。各村分布较为分散，以农业种植为主要经济来源，部分村庄还发展小规模养殖业和农副产品加工。

在历史沿革方面，1952年始设区辖大胡会乡，1956年4月改为县辖大胡会乡。1958年11月，五寨、神池、岢岚三县合并，公社化初期属南峰人民公社。1961年3月三县分开，1966年3月增设胡会人民公社。1984年10月，胡会人民公社更名为胡会乡，这一建制沿用至今。

胡会乡民风淳朴，保留有浓厚的晋北乡村特色。近年来，随着乡村振兴战略的推进，当地基础设施逐步改善，交通条件有所提升，群众生产生活水平不断提高。胡会乡以土豆、莜麦、豆类为主的特色农业，也成为当地农民增收的重要渠道。