反差如此之大的汉武帝的确是令人感到奇怪，毕竟是英明了几十年的帝王，就算是到了晚年就这么容易被骗吗？仔细想一下，巫蛊之祸之所以发生或许有更加深层的原因。很可能汉武帝想要借着巫蛊之祸的由头铲除卫家的外戚集团。
外戚集团的壮大可以说是大汉王朝前期所有皇帝们的噩梦。刘邦死后，吕后与外戚集团吕氏家族把持朝政，之后便开始大肆屠杀刘姓子孙，逼得刘姓子孙不得不发动兵变来夺权。汉武帝时期的窦太后在汉武帝执政前期根本不放权，处处掣肘，使得当时年轻的汉武帝根本无法施展自己的一腔抱负。而汉武帝的母亲王太后也屡屡插手朝政。另外这两位太后的兄弟都曾在朝堂中位极人臣，也正是因为如此，外戚势力十分强大，对于皇权来说绝对是一种威胁。
汉武帝可以说饱受外戚集团势力的影响，在他的心目中，外戚干政也是挥之不去的阴影。他不愿意在自己的时代再出现外戚集团势力干政的事情。可惜事与愿违。汉武帝娶了卫子夫为皇后，卫子夫为他生下了太子刘据，而卫子夫的弟弟卫青与外甥霍去病成为汉武帝时期抗击匈奴期间最为优秀的两位将领。围绕着皇后卫子夫以及太子刘据再次形成了卫氏外戚集团，汉武帝怎么能不担心？
