当然杨广并非无能之辈,他能当上太子也是有真才实能的。在南下灭陈的战争中杨广就是统帅,平定江南后杨广坐镇江南,政绩十分突出,获得满朝文武一致赞叹。不过有能力归有能力,这也不能掩盖杨广好色和野心勃勃的事实。公元604年,隋文帝患病居住在仁寿宫。杨广考虑到杨坚去世的话必须做好预备方案,就写了一份信派人送去询问杨素,杨素也写了一封回信给杨广,可这封回信被误送到杨坚那里,杨坚看了大怒,心想自己还没死呢你杨广就惦记着皇位了。而杨广也不合时宜的在这样的时间点上调戏宣华夫人,被杨坚得知,怒道"独孤误我",随后便叫来柳述、元岩,让他们把杨勇找来,但此事被杨素先一步知道了,杨广立刻采取措施控制了柳述、元岩,并调兵包围了仁寿宫,不久后杨坚就驾崩了,至于杨广有没有弑父就不得而知了。但是杨广矫诏赐死杨勇是史书记载的。
除了杨勇,杨广对他其他的兄弟也不手软,蜀王杨秀被他诬陷使用巫蛊诅咒隋文帝和汉王杨谅,结果被贬为庶民,后被软禁;汉王杨谅以讨伐杨素为名于并州起兵造反,后被镇压投降,幽禁至死。为了彻底解除威胁,杨广还杀了杨勇的所有儿子,并且处死了功臣宇文弼、贺若弼等人,从此杨广独掌朝政大权。
虽然杨广的登基之路充满腥风血雨,但是他的抱负也得以施展。继位之初杨广还算是比较贤明的,改革官制、修订律法、完善科举、迁都洛阳、缓和南北矛盾促进民族统一等等,当然一个伟大的帝王文治武功都得好,杨广自然也不会只注重政治,军事上他也十分强力,派兵先后征讨了吐谷浑、占城、琉球、契丹,大宴突厥,使得四方臣服,大隋国威名扬海外。