父子见面后，文帝一句话也不搭理杨秀，不听其辩解，直接认定了他违法犯罪的所谓"事实"，第二天又派使者严加训斥。杨秀跪下谢罪，文帝毫不宽宥，"顷者秦王糜费财物，我以父遣训之。今秀蠹害生民，当以君道绳之"，表示当年处理杨俊时还有舐犊之心，手段还算轻的；而今对杨秀要收起父子之情，用人君之道绳治，直接将杨秀交给司法部门论罪。
文帝对亲生儿子如此无情，大臣庆整都看不下去了，劝谏文帝，"庶人勇既废，秦王已薨，陛下见子无多，何至如是！蜀王性甚耿介，今被重责，恐不自全"，陛下您五个儿子，已经病死一个，废掉一个，只剩三个了，难道要赶尽杀绝吗？那可是您的亲骨肉！蜀王性子耿直，心理压力过重，会把他给逼死的。文帝听后，"大怒"，要割掉庆整的舌头，后虽作罢，但又威胁群臣，再敢求情，"当斩秀于市以谢百姓"。群臣噤若寒蝉，文帝遂将案件交由杨素审理。而杨广杨素是一体的，这就等于将四儿子又交给二儿子处理。
杨广决定彻底终结四弟的政治生命乃至自然生命，派人制作一个木偶，捆绑双手，钉死心脏，还在上面写上文帝和五弟汉王杨谅名字，另写"请西岳慈父圣母收杨坚、杨谅神魂，如此形状，勿令散荡"字样，等于是诅咒杨坚、杨谅早日升天，永世不得翻身。制作完毕后，杨广派人将木偶埋到华山脚下，杨素又顺理成章地挖了出来，再加上伪造的杨秀起兵造反檄文，一并呈奏给文帝。
木偶巫蛊
