2004年，全县辖6镇3乡：上栗镇、金山镇、桐木镇、赤山镇、福田镇、彭高镇，鸡冠山乡、东源乡、长平乡。
杨岐村、关上村、关下村、新坝村、南源村、保护村、金鸡村、卯田村、黄冲村、水井村、大坪村。
桐木镇2004年辖：桐木居委会、桐木村（镇政府所在地）、莲台村、周田村、雅溪村、杨坊村、黄图村、枣木村、荆坪村、崇德村、蕉源村、枧冲村、楚山村、湖塘村、丹桂村、小埠村、城冲村、洪东村。
福田镇2004年辖：福田居委会、硖石居委会、清泉村、福田村、双源村、明山村、长安村、长塘村、边塘村、战山村、跃星村、大宇村、清溪村、桃文村、连陂村、田中村、硖石村、山田村。（其中硖石居委会、田中村、硖石村、山田村由安源经济开发区管辖）
彭高镇2004年辖：彭家桥居委会、彭高村（镇政府所在地）、马棚村、坛华村、沽塘村、东山下村、杂下村、华源村、泉溪村、韶陂村、大星村、高丰村、联洪村。（其中大星村、高丰村、联洪村由安源经济开发区管辖）
赤山镇辖：赤山居委会、院背村（镇政府所在地）、丰泉村、赤山村、兰田村、耿塘村、大院村、麻田村、幕冲村、湾里村、枫桥村、楼霞村、泉陂村、高南村、黄花村、新店村、楼前村、观泉村、万新村、周江村。（其中万新村、周江村由安源经济开发区管辖）
鸡冠山乡辖：三龙村、芦下村、高田村、横下村、鸡冠村、豆田村、庙背村、圳上村、恢柳村、栅上村、驿马村、流源村、砖岭村。
长平乡辖：星辉村、福寿村、长平村、平基村、大塘村、新蕉源村、黄泥塘村、落星村、狮形村、塘上村、佛溪村、石塘村、流江村、马良村、杉木村、菱角村、明星村、淡塘村、石溪村。
东源乡辖：东源村、江岭村、新益村、桃源村、小枧村、民主村、石岭村、石源村、田心村、宫江村、上埠村、楼下村、羊子村、镜山村、逢源村、桥头村、竺塘村。
