而太子杨勇在这个问题恰好犯了老妈的禁忌。他的太子妃是大臣元孝钜的女儿元氏，是老妈亲自为他选定的正妃。可是杨勇却不太中意这桩婚事，对元氏也爱搭不理的，郁闷的元氏在开皇十一年的时候去世了，身后也没留下一男半女。杨勇却更偏爱侧室，与侧室生养了一大群子女。独孤伽罗是极为重视嫡子女，讨厌小老婆的，杨勇不爱正妻爱侧室的作法引起老妈的极大不满。
而杨广却长袖善舞，投其老妈所好。在父母面前谦恭至孝，与正妻萧氏恩爱情深。并且把府中装饰、乐器故意做旧，装作一副节俭的样子。而杨勇却比较奢华，这一点又惹得提倡节俭的老妈老大不高兴。但只凭这些生活琐事还不能彻底扳倒杨勇，杨广还有更厉害的杀手锏！
杨广有个死党叫宇文述，就是日后在江都逼杨广自缢的那个宇文化及的老爹。宇文述拉拢了朝廷重臣杨素，这样形势对杨勇就大为不利了，一些对杨勇不利的流言塞满了杨坚夫妇的耳朵。
杨素趁机对杨勇落井下石，有次杨素奉杨坚之命到太子府探听虚实，故意拖延时间让杨勇久等。杨勇面见杨素后显得有些不耐烦，而杨素回奏杨坚时称杨勇对皇帝老爹不满。杨坚深信不疑，对杨勇越发不信任，并解除了太子府的兵权。此时，杨广又指使太子府一个叫姬威的人诬告杨勇谋反。这下问题可大了，这已不是生活问题了，直接上升到政治问题了。
