杨广画像
为表示对杨广的信任，文帝交给他的第一件重要任务就是看管废太子杨勇。文帝此举，只能是把杨勇往绝路上逼。被软禁期间，杨勇"自以废非其罪，频请见上申冤"，多次上书请求当面向父皇诉说冤屈，所有奏章无一例外都被杨广扣下。杨勇走投无路，"于是升树大叫，声闻帝所，冀得引见"，只有爬到树上，对着皇宫哀嚎呼叫，希望父皇能听到自己的声声悲鸣。文帝心有戚戚，杨素一句话就把杨勇踹进谷底，"言勇情志昏觅，为癫鬼所著"，说杨勇这是被厉鬼缠身，神经错乱，"不可复收"。文帝"以为然"，竟然选择相信了杨素的这套说辞，"卒不得见"，父子二人再也未能见上一面。
直到仁寿四年（604）七月，病榻之上的文帝在忠于杨勇的柳述、元岩等人劝说下，幡然醒悟，意欲召回杨勇，重立为太子，可惜大势已去。杨广杨素迅速带兵进宫，按下文帝驾崩的快进键。七月十三，文帝去世。七月二十一，杨广即位，随即下诏让杨勇自杀。杨勇拒绝服毒，遭"缢杀之"。
隋文帝去世后，葬于泰陵
