虽然独孤皇后学识、眼光都好，但是是生性绝妒，不容杨坚接近女色。独孤氏嫁给杨坚时才十四岁，她当时让丈夫发誓："一生之中不能与除了她之外的任何女人生孩子。"而杨坚也严格遵守誓言，孩子全都是由独孤皇后一人所生，因此隋朝后宫佳丽三千，然而形同虚设。宫中诸多嫔妃宫女，也在独孤后严厉的目光下，如履薄冰，无人敢冒生命之险去勾引皇上去调情。但杨坚就在独孤皇后去世不久，为结发妻子办完丧事，不顾自己的花甲之年，奋起余勇，不断的召幸宣华夫人与容华夫人。这宣华夫人原本是陈后主的妹妹，国色天香。容华夫人也是南国佳人，一样风流娇媚。二人早已入宫，文帝也早有意想宠幸她们，但以往碍于独孤皇后顾而不得宠幸。不过在皇后去世后隋文帝就日日欢宴，时时歌笑，比独孤皇后在时，放浪了不少。
仁寿四年，杨坚患病住在仁寿宫，杨坚召杨广入内居住在大宝殿。但杨广并非是什么慈善之人，杨广在入住大宝殿后考虑到如果杨坚去世，那必须预先作好防备措施，于是他亲手写了一封信封好，派人送出来询问杨素。不久后杨素回复给杨广一封信。宫人却误把回信送到了杨坚的寝宫，杨坚看后极为愤怒。在天刚亮，宣华夫人出去更衣，被杨广所逼迫。宣华夫人不断反抗了他才得以脱身。当她回到文帝的寝宫，杨坚见她神色不对，便问起原因，宣华夫人流着泪说："太子无礼！"杨坚愤怒，捶着床说："这个畜生！我怎能将国家大事交付给他！独孤误了我！"
于是他唤来人说："召见我的儿子！""是杨勇。"当人出了杨坚的寝宫，起草敕书。但此事却被杨素知晓，并告诉了杨广。杨广就假传杨坚的旨意将人逮捕，关进大理狱。而且他们迅速调来东宫的军队来宿卫仁寿宫，宫门禁止出入，并派宇文述、郭衍进入调度指挥；命令张衡进入仁寿宫侍侯杨坚。后宫的人员全被赶到别的房间去，只留一人在隋文帝的身边。因此随后不久，杨坚在大宝殿驾崩。至此隋文帝悲愤的在此结束了他传奇的一生。
