太子杨勇仁德、礼贤下士，百官朝见杨勇，而杨勇也高兴接受他们的祝贺。隋文帝认为杨勇违反礼制，于是下令臣下不得再以朝见礼去见杨勇，并且对杨勇的宠爱也日益消减，反而增加怀疑之心。
杨勇生性好色，喜爱奢侈，这一点杨勇杨广兄弟俩是一样的，但是杨广伪装的好，在隋文帝和独孤皇后在世的时候，只宠爱王妃萧妃一人。并假装自己没有什么姬妾，且只和萧妃厮守，独孤皇后对杨广的德行在隋文帝面前大加称赞。
而杨勇有许多妾侍，其中有位云昭训，因姿色娇美，特别受杨勇宠爱，杨勇的正妻元妃不得宠爱，气出了心病，没两天就死了，杨勇随即让云昭训主持太子宫。独孤皇后认定是杨勇与云昭训合谋害死嫡妻，不但责备杨勇，又派人去暗察。独孤皇后一比较两个儿子，就更加喜爱杨广了，有意废黜杨勇的太子之位而立杨广为太子。
