娄烦也算是一个有历史兴盛过的种族，春秋时期，周天子要举行诸侯大会，都要请娄烦人作为观礼嘉宾。
战国时期娄烦进入兴盛时期，他们清一色骑兵，弓马娴熟，频频南下骚扰，中原各路诸侯不胜其烦。
三家分晋后，娄烦族乘虚南下，攻占了原本晋国的大片领地，将国都定在了今天的娄烦县，占领了大半个山西之地，建立了兴盛的娄烦国。
当时北方的赵国深受其害，新继位的赵武灵王，颇有雄才伟略，他经过长期观察，看到娄烦等北方少数民族穿的都是衣短袖窄的服装，这与中原宽衣博带有很大区别，而且他们军队对于骑兵为主，而赵国则是笨重的战车，与骑兵相比，机动性太差。于是他下决心胡服骑射。
赵武灵王改革后，赵国实力大大增强，一举击破娄烦国。
娄烦国灭亡后，一部分娄烦人内迁做了赵国人，而另一部分不愿意归附的娄烦人，在娄烦王的率领下，向北迁徙，在赵国和匈奴的夹缝中求生。后来娄烦王联合中山国又一次卷土重来，被赵武灵王大败。
而后冒顿成为匈奴单于之后，娄烦开始融合进匈奴人当中。而留在中原的娄烦人则成为了汉人当中的一支。
两支娄烦人分开并不算久远，双方还有联系，当然看不起穷亲戚是人的本性。在中原的娄烦人，得到了中原先进的耕作技术，日渐富裕起来，自然就看不上还在游牧的穷亲戚，这十几年来，越来越多的娄烦人已经把自己看成是汉人了，就越发不待见这些穷亲戚了。