汉武帝对于外戚干政这事儿还是比较反感的，汉朝政权到汉武帝这一代也不过七十多年，可是先后经历了吕雉、窦太后两次后宫干政、外戚弄权的事儿，外戚干政的教训历历在目。从这个角度来说的话，汉武帝完全有可能对卫、霍两人下手，但是又不能把两人都弄死，毕竟匈奴还是有可能卷土重来的，得留一个以备后患。
再看二人的性格，卫青老成持重、忠厚老实，恩威之下很容易控制；而霍去病则年轻气盛、冲动跋扈，最明显的例子就是以军功受封的大汉关内侯李敢，霍去病说杀就杀了，这么嚣张的性格，相比之下更难以驾驭，所以，弄死霍去病也许是最好的选择。
