汉武帝听完之后感慨道:"这世上哪还有这样的佳人",平阳公主在一旁说道:"李延年的妹妹就是这样的佳人"。李氏不仅长得好看,身材曼妙,而且和李延年一样能歌善舞,汉武帝将她纳为夫人之后,十分宠爱。李延年因此受封为乐府协律督尉,兄妹二人和汉武帝一同卧起,李氏家族显赫一时。
李夫人在为汉武帝生下一子后,身体越来越差,不久之后就病逝了,汉武帝悲痛万分,下令以太后礼仪安葬,让画师将李夫人容貌画下挂在甘泉宫。
李夫人死后,汉武帝对李延年的宠爱越来越强烈,据史书记载"与上卧起,甚贵幸,埒如韩嫣"。李氏家族因此变得越发嚣张跋扈,李延年弟弟李季更是公然祸乱后宫。汉武帝知道后,下令诛灭李延年和李季兄弟宗族。
当时,李延年兄长李广利正率军攻打大宛,所以没有受到牵连,但是因为密谋拥立外甥刘髆为太子被人告发,汉武帝下令诛杀李广利家族,就这样李氏一族全部覆灭。