后来发生了一件事情，让这种日积月累的不满来了个总爆发，加上王娡暗中使坏，直接导致刘荣被废。当时，汉景帝生病，栗姬前去探望，在病榻前，景帝嘱咐栗姬，让她在自己百年之后，好好善待自己其他的皇子，其意思就是想立她为皇后，谁知道这个栗姬可能是脑子进了水，她又回绝了景帝的请求，这让汉景帝非常愤怒，要知道，景帝一生气，后果很严重。这时候，王娡王美人又火上浇油，暗地里让人向景帝上奏说既然封刘荣为太子，母以子贵，应该册封栗姬为皇后，汉景帝这下可是忍无可忍，下令处死上奏的人，还废了刘荣的太子之位，改封为临江王，又册封胶东王刘彻为太子。刘荣做了三年的太子，竟然是因为母亲的愚蠢而葬送了大好的前程。
汉景帝七年（前150年）正月，栗姬失宠，刘荣被废为临江王。四月，封王美人为皇后，立胶东王刘彻为太子。景帝中元二年（前148年），刘荣因为修建宫室侵占了宗庙的土地，被人告发。中尉府郅都责讯甚严，刘荣惧怕，想要刀笔，直接写信给景帝谢罪，郅都不给。窦太后堂侄魏其侯窦婴派人悄悄送给刘荣刀笔，刘荣写完谢罪信后，在中尉府自杀。刘荣死后，汉景帝刘启并没有悲伤。因为他知道，刘彻已是太子，必须为他扫清障碍，这就是政治。而刘荣和他的母亲栗姬生生的把一手好牌打乱了。
