肥西居江淮之间，有巢湖、淝水之便，历史上凡南北分裂，皆为兵家所必争，人口损失惨重。元末明初，迁入大量外籍人口。据调查31部家谱记载，移民多来自江西、江南等地。
祖籍江西家谱14部。金牛乡金牛村《陈氏宗谱》：“元末，裕公自江西瓦硝由沔阳，迁至合肥西乡大烟墩南印盒圩。”高刘镇花大塘《袁氏宗谱》：“元末，自江西饶州浮梁县瓦屑坝迁至舒合，祠堂在新仓”。南分路乡四房郢《童氏宗谱》：“元末明初，由江西南昌府瓦屑坝迁居肥西大潜山北。”北张乡大墙村汪大郢《汪氏宗谱》：“明洪武年间，始祖传公由徽州婺源来肥南汪大墙。”金牛乡上圩村《郭氏宗谱》：“明初由江西瓦集坝迁至肥西郭家山洼。”金牛乡刘祠堂村《刘氏宗谱》：“刘氏世居江西，赛公自进贤之紫溪村于明初迁肥西。”北张乡田东村《李氏宗谱》：“明万历初，由江西瓦屑坝迁至肥南中派河镇西。”北张乡金岗村马小郢《马氏宗谱》：“明万历年间，始祖应九公，从江西瓦砾坝迁合肥南乡普济庵。”董岗乡胡岗村潘湾《胡氏宗谱》：“自明中叶时，由江西及合肥。”北张乡鲍冲村大童岗郢《李氏宗谱》：“明末由江西迁舒，后迁肥。”柿树岗乡赵岗村乐小洼《乐氏宗谱》：“祖居江西瓦砾坝，明末迁婺源，后又迁庐邑钓鱼台。”金牛乡祠堂村《张氏宗谱》：“先祖检察公，明末自江西迁来肥西。”北张乡金岗村庙门口郢《方氏宗谱》：“由婺源迁合肥郡内。嗣后，宗公徙南乡方家岗。”雷麻乡余岗村店周大郢《周氏宗谱》：“明季自江西迁淝。”
祖籍江南家谱8部。方岗村方小郢《许氏宗谱》：“自皖南徽州迁江苏句容。兴公为避乱，元至正年间，迁庐郡。”界河乡界河村《翟氏宗谱》：“元末明初，自江南泾县迁来合肥西乡”。花岗乡过岗村张楼房《张氏宗谱》：“原在江南，明洪武三年，诏迁合肥，居德胜门。历四世祖贞公复迁邑之西乡，楼房名始矣。”董岗乡胡岗村槽坊郢《陈氏宗谱》：“元末，江淮之间频遭兵燹，庐凤两府地旷人稀，及明太祖问鼎金陵，下诏徙江南之民以实之。我陈氏始祖再兴公遂由句容迁合肥浮槎山之北麓戴集。大房恒法公裔迁居合肥南乡董家岗。”严店郑岗村《郑氏宗谱》：“明初册籍江浦。二世祖云霞公，自江浦迁龙舒。三世祖腾辉公复由舒迁肥南郑人桥”。董岗乡蛇形地《吴氏宗谱》：“明中叶，来肥西巴山庙，或曰来自江阴，或曰来自凤阳。”高刘乡孔大村康家圩《康氏宗谱》：“原从凤阳迁居南京，后到歙县，一支到肥西烧脉岗”。柿树岗乡小河湾《程氏宗谱》：“伯通公从歙县迁郡城之西大墩岗。”
其他9部。北张乡官塘村神树郢《赵氏宗谱》：“明初从郡内金斗城赵千户巷迁焦湖沿肥南黄务冲。”花岗乡七十埠村《赵氏宗谱》：“明初由金斗城迁居黄务冲。”董岗乡土楼村金刚寺《董氏宗谱》：“发迹陇西，至明永乐时，始迁庐州，后至肥西董家岗。”界河乡柳湾村《徐氏宗谱》：“徐正芳公于明成化二年，由凤阳之临淮关，迁居于肥西徐家小河”。袁店乡袁店村半个店《唐氏家乘》：“明嘉靖年间，始祖尚志公迁合肥至今。”花岗乡叶仓房村圣井《叶氏宗谱》：“自南阳移籍于庐郡。”防虎乡油坊大郢《解氏宗谱》：“南迁庐州，明末由肥北清水源疃迁居肥西。”
清咸丰、同治年间，肥西为太平军、捻军同清军作战的主战场之一，人口锐减。战乱后，迁入人口颇多。
肥西解放初，从冀、鲁、苏北及本省淮北等地调来一批干部。1968年始，本省及上海市下放干部、学生数千人，到本县农村“插队落户”。后多数返回或被招工，留下仅极少数。1970年后，因婚姻关系，从四川等地陆续迁来一批女青年，仅据长安乡11个村不完全统计，自1978年下半年至1979年底，就有29名四川青年嫁来。