衡阳市体育局为衡阳市人民政府管理体育工作的职能部门，下辖1个副处级事业单位，即:衡阳市体育运动学校(衡阳市第十九中学)，7个正科级事业单位，即:衡阳市体育馆、衡阳市游泳跳水中心、衡阳市体育科研辅导站、衡阳市体育接待站、衡阳市体育用品服务中心、衡阳市体育彩票发行管理中心、衡阳市全民健身中心。现有干部职工251人。衡阳市体育局现有衡阳市体育运动学校、衡阳市游泳跳水学校等2个国家高水平体育后备人才基地;游泳、跳水、体操、射击、网球、武术跆拳道等6个省级体育后备人才基地、在各县市区建立了23个市体育后备人才基地，为国家培养输送了大批优秀人才，培育了李敬、凌洁、刘玉香、罗洗河、何世剑、柴飚、何敏、谭飞虎