县内传统体育历史悠久。民国时期兴起球类、田径等近代体育，但设备简陋，参加人少。1949年以后，体育事业逐步发展，经常开展各种竞赛活动。50年代初，县政府文教科配有专职体育干部，1954年成立县体育协会，1956年成立县体育运动委员会。1952年至1985年，举办各项县级运动会63次，参赛运动员8360人次。1979年至1985年，参加省和全国各类运动会22次，并多次获奖。肥光中学业余无线电报务班(测向队)参加省级比赛，3次获得男女团体总分第一名；参加全国性比赛8次，夺得金牌8枚，银、铜牌45枚。
1985年，经县体委测验，中小学学生达到国家体育锻炼标准的有4000多人。县区镇各项体育设施初具规模，半数以上村经常开展球、棋类活动。全县现有200～250米跑道小运动场13个，400米跑道运动场2个，排球场6个，篮球场82个。