宇文邕在世时宇文赟尚且收敛一些，宇文邕去世宇文赟继位后，他的本性就完全暴露了，整日沉溺于酒色，丝毫不理朝政，残忍暴虐，杨丽华确实顺理成章的成了皇后，但宇文赟竟别出心裁的立了五个皇后，由此出现了中国历史上绝无仅有的"五后并立"的盛况，而杨丽华作为最早的太子妃只不过是这"五后"中的一个，而且排名还比较靠后，宇文赟对她也极为冷淡，经常大加斥责。
一次杨丽华无意之中惹怒了宇文赟，宇文赟竟逼其自杀，幸得杨丽华的生母入宫求情，叩头至流血，她才得以活命，所以杨丽华的婚姻彻头彻尾是一个悲剧，杨坚一直觉得愧对女儿。
宇文赟去世，杨坚假传圣旨，夺取辅政之权的事杨丽华是知道的，但一来她性格文弱，不愿出头，二来杨坚辅政对她也有好处，所以她并没有揭穿杨坚的阴谋，但当杨坚的野心越来越大，流露出谋朝篡位的意图后，杨丽华就不乐意了，多次与杨坚就此事发生争吵。
但"胳膊拧不过大腿"，杨坚最后还是代周自立，杨丽华也从天元大皇后成了隋朝公主，杨丽华为此与杨坚交恶，但杨坚对杨丽华心有愧疚，不忍惩罚于他，反而多次大加赏赐，还张罗为其择婿，但被杨丽华坚决拒绝！
