建国前，本县学校体育有蓝球、排球、乒乓球，民间以武术、抵棍和玩石锁、石磙等为体育活动。建国初，庐城的体育活动非常活跃，1955年庐城有蓝球场37个，蓝球队60个，其中以晓阳队、黑白队为代表。1956年成立了庐江县体育运动委员会，主任由副县长兼任，副主任和委员由有关部门负责人担任。当时蓝球、乒乓球、羽毛球和象棋等运动活跃于城乡，农村集镇也开展蓝球、象棋赛。近年来，庐城以跑步、太极拳、舞剑、练气功、徒步等为主要体育活动。每日早晨体育场、公园和机关内外参加活动的人，到处可见。
1958年夏，建立庐江县体育运动学校，有8名教师，招收学生124名，设田径、蓝球、体操、足球等课程，学生毕业后分配到小学任教师。次年体校并入庐江师范学校。1974年，县体委、教育局和庐江中学联合创办业余体校，有教练员5名，学生主要是城内中、小学中在体育上有特长的学生。每天在普通中学课外活动时对运动员进行两小时的田径、足球、蓝球、乒乓球、武术等项目训练。1978年，业余体校内设武术班，并在白山小学等4所小学建立小武术队，当年参加地区和省比赛，获得地区第一名并进入省少年组前10名。1977年至1985年，全县为大专院校输送体育人才34名，为省体工队输送尖子运动员5名。