杨广还将他提拔做了官,但他没做两天,就把其他大臣都得罪透了。众臣纷纷向上递折子,于是无奈之下杨广只能罢免了他。但没过几天,等臣子们不再抱怨了,杨广竟然又将他复职,这就能看出杨广是多在意他了。
他得了帝王的恩赐竟然还不满足,跑去和朝廷禁止来往的突厥人私下来往,这把杨广气的是差点举刀杀了他。好在杨广冲动的时候有人劝阻,这才留下了他的性命。杨广不光没杀他,还熄了本想惩罚他的心,可能就是这样的纵容,才使得他愈加放肆。
大业12年的时候,杨广跑去攻打高丽,搞得民不聊生,等到财力无法支持他继续攻打的时候,他直接躲到了江都,连皇宫都不回。他躲在这里是舒坦了,但他手底下的人日日思念家乡,想要早日返程。人心散了,这各方势力也是蠢蠢欲动,宇文化及是更加不留情面,直接和司马德戡联手,绑架了杨广,还逼得他自杀。