刘子业深知“将在外，君命有所不受”的道理，于是就想尽办法把这几个叔父都调回京师软禁起来。三位皇叔由此失去了自由，不仅如此，他们时刻还受到刘子业的凌辱。
刘彧被刘子业称为“猪王”，有一次还被刘子业放在一水坑里扮猪，吃猪食。看着刘子业狂笑不已的样子，刘彧虽然心里愤怒到了极点，但是为了活下来，只能表面上装出一副恭顺、服从的样子。有几次，刘彧差点就被喜怒无常的刘子业所杀，幸得刘休仁机灵地劝阻，才没被杀。
刘彧等几兄弟在受尽凌辱、尝尽担惊受怕的日子后，认识到决不能坐以待毙。于是他们暗中密切注意刘子业的动向，刘彧派他的亲信阮佃夫、李道儿等积极活动，联络了刘子业的侍从寿寂之、姜产之等10多人作为内应，于是先下手为强，杀了侄子刘子业，自己当了皇帝，还处死了刘子业的兄弟姐妹刘子尚，刘楚玉等人。
