又由于北方战乱，余姓南迁不可避免，部分余姓族人迁入湖南、湖北。唐代以后，余姓才迅速壮大起来，并形成东南一带两处望族。余姓迁入福建、广东等地，始于唐末宋时。明清之际，余姓不仅已遍布江南各地，而且北方各地的余姓也得到了迅速的发展.
三、 郡望堂号
【堂号】
“清严堂”：宋代余元一，是朱熹最喜欢的门人，最讲仁义理智信五伦，号“清严”。
“忠惠堂”：宋时余天锡是宰相史弥远的家庭教师。沂王无后，命天锡在王族里找一个比较有贤德的幼儿作儿子。天锡给他找来了贵庄，就是后来的宋理宗。理宗即位，封天锡为奉化郡公，死后谥“忠惠”。
【郡望】
新安郡：晋太康元年（公元208年）改新都郡置郡，治所在始新（今淳安西）。相当今浙江淳安以西，安徽新安江流域、祁门等地。
下邳郡：东汉永平十五年（公元72年）改临淮郡置国，治所在下邳（今江苏雎宁西北），辖地北至江苏新沂、邳县，南至安徽嘉山，东至江苏涟水、淮安和靖江市。南宋时改为郡。

吴兴郡：三国吴宝鼎元年（266年）置郡，治所在乌程（今浙江吴兴南），相当于今浙江临安、余杭、德清一线西北，兼有江苏宜兴县地。