衡陽市體育中心於2009年5月9日動工建設,主體工程於2010年12月竣工。體育中心能同時容納3萬名觀衆,包括了一個有3萬座位的中心體育場、可容納3000人的游泳館和6000人的體育館。
衡陽中心體育館位於衡州大道以南,凌合路以西,衡陽師院新校區以北,師院主入口以東,建築面積約36000平方米,總投資約2億元,觀衆席的固定座位爲3萬個,特殊情況下可達3.5萬個。