由于卫青的几个孩子在公元前124年仍然"在襁褓中"，当卫青在公元前106年去世时，他们也就20岁上下的年龄。卫青的三个儿子都已经是是二十多岁上下，这也就意味着他们已经长大了，作为成年人，他们自然会选择独立，因此，50岁的平阳公主对他们是好是坏我们是无法考证的。事实上，卫青的子女的晚年生活与平阳公主关系真的不大。
公元前124年，卫伉被汉武帝封为宜春侯，公元前116年，由于坐在"矫制不害"的座位上，免去了他的职务。所谓"矫制不害"，是指擅自发布或修改皇帝的命令，"不害"意味着没有造成伤害，当时，历史上没有记载谁参与了卫伉的除名，次年，即公元前115年，平阳公主死了第二任丈夫，不久，她嫁给了卫青。
公元前106年，卫青死后，汉武帝让卫伉继承父亲的头衔，成为长平侯，卫伉之所以能继承父亲的头衔，很难说是因为汉武帝是看卫青的脸面，还是看平阳公主的脸面，如果是平阳公主，那么卫伉显然是受益者。
