按《史记》，匈奴人的先祖是夏朝王国的遗民，向西迁移的过程中融合了月氏、楼兰、乌孙、呼揭及其旁二十六国的白种人。《史记·匈奴列传》记载：“匈奴，其先夏后氏之苗裔，曰淳维（獯鬻、熏育）。唐虞以上有山戎、猃允、薰粥，居于北边，随草畜牧而转移”。《山海经·大荒北经》称：犬戎与夏人同祖，皆出于黄帝。《史记索隐》引张晏的话说：“淳维（熏育、獯鬻）以殷时奔北边。”意即夏的后裔淳维（獯鬻、熏育）在殷商时逃到北边，子孙繁衍成了匈奴。（夏桀流放三年而死，其子淳维又作熏育、獯鬻、熏粥、荤粥带着父亲留下的妻妾，避居北野，随畜移徙，即是中国所称的匈奴。）部分学者根据《史记》记载的后半段文字，认为匈奴原是山戎、猃狁、荤粥。王国维在《鬼方昆夷猃狁考》中，把匈奴名称的演变作了系统的概括，认为商朝时的鬼方、混夷、獯鬻，周朝时的猃狁，春秋时的戎、狄，战国时的胡，都是后世所谓的匈奴。
“以灭夷月氏，尽斩杀降下定之。楼兰、乌孙、呼揭及其旁二国皆已为匈奴。诸引弓之民并为一家，北州以定。”还有一说，把鬼戎、义渠、燕京、余无、楼烦、大荔等史籍中所见之异民族，统称为匈奴。至汉代，“匈奴稍强，蚕食诸侯，故破走月氏，因兵威，徙小国，引弓之民，并为一家，”即匈奴统一了北方的游牧民族。从此，匈奴又自称胡人，或“天之骄子”，「单于遣使遗汉书云：“南有大汉，北有强胡。胡者，天之骄子也，不为小礼以自烦。」