第二个原因，恐怕要先说到霍去病去世的26年以后了，在公元前91年。汉武帝因为巫蛊之事，对卫子夫、太子刘据、卫青的后代等人狠下杀心。霍去病在还活着的时候，就已经看出汉武帝是一个性情多疑的人。实际上，汉武帝非常忌惮卫青，所以只好把霍去病送到军营中，不能让卫青一人拥有这么大的权力。
霍去病为了能够向皇帝表明自己没有造反之心，对于汉武帝送来的10车肉，当然是不敢真的吃了，必须得供奉起来。从表面上看，霍去病似乎是"苛待"士兵了，但实际上他只是为了能够自保。由此可见，伴君如伴虎。在皇帝的身边做事，心思肯定会细腻一些，足见他的高明和远见。
不过，霍去病虽然去世，但他的儿子霍嬗却袭了父亲冠军侯的爵位，这个孩子也很受到汉武帝的喜欢，原本皇帝有意让这个孩子在长大之后继承霍去病的功业。但是，没有想到汉武帝在登泰山封禅以后，没过多少时间，霍嬗就已经去世了，当时他可能只有10岁，也没有子嗣，而霍去病的冠军侯封号也在这次的事件中被去除。
