但不幸的是，李夫人命薄，在受宠没几年后便去世了，她在生产后大病遗产，不久后便逝世了。在她临死之际，汉武帝要去探望她，但是她却不见汉武帝，她对汉武帝说，自己已经生病很久了，容颜憔悴，不想面圣，希望自己去世后，汉武帝能够好好对待自己的儿子以及兄长。
尽管汉武帝一直想要见她一面，但是她却始终不让，一直推脱。后来拗不过汉武帝，在汉武帝还要坚持面见的时候，她选择了把脸转过去，始终不让汉武帝见到她的脸，汉武帝为此很是不高兴，便转身离开了。
《汉书·卷九十七上·外戚传第六十七上》记载：初，李夫人病笃，上自临候之，夫人蒙被谢曰："妾久寝病，形貌毁坏，不可以见帝。上复言欲必见之，夫人遂转乡歔欷而不复言。于是上不说而起。
对于李夫人的这种做法，她身边的人很不理解，而她自己却是这么说的，她说她之所以不见汉武帝最后一面，是为了自己的儿子和兄长着想。她之所以能够获得皇帝的宠爱，是因为自己的容貌出众，她本就出身低微，正是因为这副好皮囊成全了她。以色事他人，终究不能长久，最终也会有年老色衰的一天。
如今她美丽的容貌已不再，汉武帝如果见到的话，那么之前对她的种种怜惜都会不复存在，而且一定会十分厌恶她。这样，汉武帝就不会再去怜悯录用她的兄弟了。
