后来，他还想要在会稽也建一座这样的行宫供他享乐，但是，那时的百姓们已不堪沉重的赋税、不能忍受杨广的暴行，于是，便纷纷组织起武装力量进行反抗。这时候的义军，在杨广的眼里无非就是小打小闹，只是有点惹眼罢了。
而后的时间，他不管不顾，每日沉浸在温柔乡里，美酒佳肴好不快活。
比如：三月，他驾车到南方赏春，和群臣共度上巳节，命大学士收集关于水的故事，这样不像皇帝能做出的事，在当时却是数不胜数。五月的时候，炀帝命人收集萤火虫，来博美人一笑。仔细一想，原来，杨广在几百年前就已经做过和美人赏萤火虫的事情了。
杨广的一生，无非就是享乐，宫室之美、佳肴之美、再伴有美人与美景，他还有什么不满足的呢。可是，事实上，他确实不满足，他好大喜功，多次派兵攻打高句丽，还不许有人妄加评议。在叛军的事情上，也是如此，他骄傲自大不认为自己会输。
