首先，因为卫青和霍去病都死了，汉武帝担心年轻一代会来祸乱朝廷。这两个人在军队里取得了杰出的成就，都已经去世，只留下年轻一代。汉武帝以前一定想过，一旦太子登基，卫子夫肯定是下一个窦太后，卫家仍然控制着兵权。此外，朝廷上的许多大臣与他们的家庭关系密切。谁能以这种速度控制它们？汉朝以后，天下会是谁的还不确定。
此外，他的儿子也不是一个硬汉。他将如何夺回兵权？他自己也深受外戚干政之苦。他年轻时就登上了王位，但所有的权力都掌握在太后的手中。太后死后，他的母亲王太后仍然想继续他的政治工作。如果不是因为他使用了某种手段，估计朝廷都没有他这个皇帝，所以他觉得卫家不得不被撤职。
这时，卫子夫已经老了，汉武帝已经十多年没有溺爱她了。她作为皇后的地位有些不稳定。连同他的位置，都开始动摇。朝廷上的一些大臣兴风作浪。他们与后宫联手挑战整个家族。汉武帝是老了，他害怕死亡。只有权力能让他感到安全。这时，太子身陷巫蛊的不幸也使汉武帝非常愤怒和害怕。在太子不幸去世和卫子夫自杀后，卫家失去了最后一个支持者。汉武帝借此机会消灭了他们家族的力量。
汉武帝是中国历史上非常著名的大一统皇帝。在他的统治期间，他一个接一个地打败了强大的敌人，好不容易巩固了自己的地位，不可能允许别人侵犯他的权力。卫家太过于显赫。对汉武帝来说，它们就像是肉中刺，都是在提醒汉武帝，一定要把它们挑出去，汉武帝非常仁慈，等到卫青去世后，他才愿意开始动手。
