在战场上，要想活命，首先就得不要命，“狭路相逢勇者胜”，这在普遍运用冷兵器的古代尤其是这样。
霍去病就是“不要命”人物里一个典型的代表。“匈奴未灭，何以家为”，这句掷地有声的豪言，曾激荡起多少代做着英雄梦的少年的热血。
霍去病与武帝有一种特殊的缘分，这不单单是指他的姨母卫子夫做了武帝的皇后，更是因为他出生的那一年，恰恰也是武帝登基的那一年。
霍去病的母亲是卫少儿，也同他的外祖母一样，在平阳公主家做女奴，而霍去病的父亲霍仲孺则是平阳公主封邑内的一个小吏。霍、卫两人情投意合，结为夫妻，并且生下了霍去病。
本来，霍去病该是与其他奴仆的儿子一样，继续做奴仆一了此生的，不过因为他姨母卫子夫受武帝的宠爱，奴仆血统的霍去病从小过的却是贵公子衣食无忧的生活。
可以说，霍去病是武帝看着长大的，也是武帝一手培养的，他与武帝的关系，可比父子。
武帝很早就注意到霍去病的军事天赋，想要亲自教授他孙、吴兵法，不过霍去病的反应大大出乎武帝的意外，他说，行军打仗，靠的是因敌因势，不需要拘泥于古代兵书。这话说得很有见识。
霍去病长到十八岁时，已是一个威武健壮的少年，无论是骑马打猎还是舞刀弄枪，他都是一学就会，一会就精。
公元前123年，匈奴又来犯边。武帝遂遣大将军卫青率李广、苏建等六将军出定襄、击匈奴。这一次，年纪轻轻的霍去病也随军出征。他被舅舅卫青带在身边，做了他的票姚校尉，手下率领精挑细选的八百个骑士，都是勇武擅骑射的人物。