独孤皇后去世以后。文帝最宠爱的就是荣华夫人和宣华夫人。南朝陈后主的妹妹就是宣华夫人，她叫陈氏。她长得非常漂亮，江南第一美人的称号说的就是她。杨广对他的相貌，那是非常的喜欢。那一天晚上，陈夫人照顾生病的皇上。早晨起来刚换衣服的时候被杨广看见了。杨广当时想要对陈夫人进行无理。但是没有得逞。
当陈夫人衣衫不整神色惊慌地来到皇帝的床前时。文帝非常的气愤。并且大声的骂道。这个畜生到底竟然敢如此的不讲道理。怎么能够担当治理国家的重大责任呢。在他非常愤怒的时候，下达了命令说。把我的孩子叫来。大臣以为他要找见阳光，文帝急忙纠正道不是他是勇。这时候非常愤怒的文帝要把杨勇立即立为太子。想要把杨广给废了。大臣起草好了诏书之后让杨素看了一遍。杨素他是杨广的非常信任的人。自然不会认杨勇为太子。杨广于是就假传圣旨。派出自己的亲信张衡立即来到大殿伺候文帝。
张衡进入大殿以后。就把宫里的侍卫用人全部都赶出了殿外。用了不过一会儿，张衡走出了大殿，宣布文帝已经驾崩了。一时之间朝野都在议论这件事。他们都认为是张衡把文帝给杀死了。至于说张衡是怎么把文帝给杀死的。历史的记载中，说法都不一样。有的史书中是说张衡用毒药害死了文帝。但是另一个是书中是这么说的。张衡用刀自杀文帝血都溅满了屏风，叫声到处都是最后文帝就驾崩了。相似的描述，在很多古代的书籍中都有记载。
