"晋王广美姿仪，性敏慧，沉深严重；好学，善属文，敬接朝士，礼极卑屈；由是声名籍甚，冠于诸王。"--《隋书》
这种话虽然是说给母亲的，但目的是通过母亲的枕边风传给父亲，意图就是夸大杨勇的狼子野心，并点明了杨勇会残害亲兄弟。再给杨勇摸黑的同时，杨广也尽力做出谦卑有德的姿态。在军中检阅时遇到大雨天气，士兵要给他披上雨衣，杨广却坚持与士兵共甘苦，站在雨中完成检阅。隋文帝到杨广居所探望时，杨广令人布置下沾满灰尘的乐器，而将办公台案反复擦亮，隋文帝一见便知杨广不好声色，勤勉于政。这就与杨勇形成了鲜明对比，再有宇文述、杨素这种开国功勋的挑唆，本来能力不错的杨勇，就成了直率易怒，形于言表的形象，隋文帝渐有废太子之意。
所以杨勇违制接受百官"朝贺"成了导火索，杨坚于开皇二十年（600年）十月废除杨勇的太子之位，押往东宫看管，另立杨广为太子。杨勇被囚禁期间多次上书诉冤，但因杨广受命看押哥哥，所以这些上书根本无法呈上。得不到回应的杨勇也明白是怎么回事，于是趁机爬到树顶大喊冤屈，希望能获得面圣的机会。这件事儿不仅没能救的了杨勇，还被杨素利用，上报杨坚称废太子精神出了问题，因此再没有恢复正常生活的机会。
