直到后来晚年的时候，匈奴再犯，这才让汉武帝知道，失去卫青这个爱将是多么令人心痛的一件事。而随着爱将卫青的去世，他的姐姐卫子夫也跟随着不再受宠，而平阳公主当时为了能够稳固自己的权利，于是便联合当时的罪臣李延年因一首非常唯美的诗而震惊了汉武帝，后来便有了李夫人成为皇帝女人的事情发生。其实在古代的这些君王眼里，很多的君王都是见一个爱一个。
几乎是没有什么一世一双人的说法，而汉武帝就是一个例子，但是在卫子夫为他生下6个女儿之后，他便在自己60对的时候开始专心宠爱于李夫人，再加上但是李夫人温柔贤良，很快便受到了汉武帝的宠爱，虽然李夫人非常美丽，但是到最后因为红颜薄命离开了人世。可以说在晚年时期的汉武帝，是又无奈有矛盾，因为但是对于他来书，不仅想要拥有属于自己的爱情，还想拥有自己的家庭。
