桃矿街道因境内桃林铅锌矿而得名。临湘市桃矿街道办事处是经省民政厅2004年8月批准，在原桃林铅锌矿基础上成立的。原桃林铅锌矿始建于1957年4月，为国家“一五”计划156个重点项目之一，后因资源枯竭被列入国家关闭破产项目，于2003年10月破产终结。办事处驻地渔潭，所管辖区域为原桃林铅锌矿红线图地域。

桃矿街道距临湘市区12公里，距京珠高速、107国道12公里，有水泥公路相通；距京广铁路13公里，有专用铁路与京广线相连接。经过近五十多年的矿山建设和发展，这里形成了比较完备的城建基础、丰富的有效存量资产、大量的专业技术人才以及十分便利的交通条件。办事处成立后，即被规划为临湘市三大工业版块之一。

在历史沿革方面，明代时期，桃矿街道属方山都交古里。清道光年间（1821年—1850年），属楚冲上里。清光绪年间（1875年—1908年），属忠防区。民国三十六年（1947年），属忠防乡，人民政府驻地忠防。民国三十八年（1949年）7月，属4区。1956年，属桃林乡管辖。1957年，桃林铅锌矿设此，成立县属工矿镇。1958年，划归忠防人民公社管理。1960年，成立桃矿公社。1968年，合并到忠防公社。1972年，改称桃矿镇。2004年12月，撤镇建立桃矿街道。

在经济发展方面，办事处成立后，按照近期保稳定、远期求发展的目标采取了一系列措施。经过五年多的努力，辖区社区基本稳定，经济逐渐恢复，集镇功能日益完善。目前辖区内有湖南新桃矿工贸有限责任公司、临湘正兴化工、桃矿化工、临湘互利泡花碱厂、湘北铁路货运中心、永丰纸业、海达机械、临湘三强矿石粉厂、金兆萤石粉厂、俊磊水泥、临湘奥林渔具等工业企业22个，实现工业年总产值12000万元。

在民生改善方面，办事处对自来水厂、集贸市场、休闲广场、俱乐部、商业步行街等进行了重建或改造，共投入改造资金2500万元。同时对渔潭、汀畈两片工人村实施了路面硬化、环境绿化、路灯亮化、公厕垃圾箱净化等“四化”工程。2004年至2007年，桃矿街道被岳阳市和临湘市委市政府评为“招商引资先进单位”“依法、普法先进单位”“岳阳市城市居民最低生活保障先进单位”等荣誉称号。

桃矿街道卫生绿化环境优美、地域文化独特、发展平台宽广、商机活力充沛，是投资、置业和旅游观光的理想区域。