但是杨暕这个人，却又有很多缺点，不但做事骄纵，喜好声色犬马，做事更是无法无天。也正是因为这些缺点，杨暕惹怒了自己的老爹，让隋炀帝觉得他不是个做太子的料。所以封太子这件事，也就不了了之了。
公元618年，宇文化及发动政变，杀死了隋炀帝。当时叛乱刚起之时，隋炀帝还问萧皇后，是不是杨暕发动的叛乱。而宇文化及干掉了隋炀帝之后，又下令让人捕杀杨暕。当时杨暕还以为是隋炀帝要杀他，拼命要去觐见杨广。结果最后，杨暕被士兵当街杀死。连同他的两个儿子，也被一并杀死。
即便到了生命的最后一刻，这对父子仍是如此的猜疑。看来隋朝二世而亡，也是情理之中的事情了。
相比杨暕，赵王杨杲明显要更讨隋炀帝的喜欢。根据史书记载，杨杲聪敏，美容仪，性至孝。不过，因为他的母亲是萧嫔，所以不是嫡子，在身份上要差了一层。不过以杨广的性格，这倒也不算什么。如果历史顺利发展下去的话，最后杨广死后，极有可能会选择杨杲来接班。
