就自身而言，杨勇有好色和奢侈的毛病。他十分偏爱自己的一个宠妾，结果把正室给气死了，这一点让独孤皇后十分不喜。再加上他在生活方面稍微有些骄奢，结果让隋文帝也有些不满，特地告诫他不要如此。
其实平心而论，杨勇的这点小毛病真的不算什么，并没有什么原则性的坏毛病。但可惜的是正好触了隋文帝和独孤皇后的枪口，所以小毛病才被无端放大了好几倍。当然，导致最后事情难以收拾的主要原因，是杨勇碰上了杨广这个狡诈的兄弟。
杨广和杨勇一样很有才干，但他的性格比杨勇阴暗多了，他才是真的好色奢侈。但杨广善于伪装，他从不将这些缺点显露给隋文帝以及独孤皇后看，在他们面前一直装得很勤俭专情。于是在帝后两人看来，杨勇处处不好，杨广能干体贴，自然愈加对杨勇不喜。
晚年隋文帝疑心病很重，在有心人的引导下，他总觉的太子杨勇有夺权篡位之心，所以最后下令废除了他的太子之位，将他贬为庶民。
虽然隋文帝临终前知道错怪了杨勇，但为时已晚。杨广上位后的第一件事，就是伪造诏书赐死杨勇，连其后代也多数害死了。
