虽然群臣劝谏刘义符，要以国事为重，但刘义符我行我素，引发顾命大臣徐羡之、谢晦等人的不满。这群权臣开始密谋，打算废帝另立明君。如果按照次序，当由刘裕的次子庐陵王刘义真即位，而且刘义真少年从军，跟随父亲平定关中。但徐羡之与刘义真不睦，徐羡之诬陷担任车骑将军的刘义真，称其觊觎皇位，借刘义符之手，将刘义真贬为庶人，徙往新安郡居住。
两年后的424年，徐羡之、谢晦拉拢傅亮和檀道济加入其中，在做好充分准备后，开始了废帝行动。谢晦先称自己的领军将军府老旧，需要修缮，让军士冒充干活的工人，聚集到领军府中。并联系中书舍人邢安泰等人为内应，准备犯上作乱。
此时的刘义符，已经十九岁，整日宴饮玩乐，不以国事为重，经常喝得酩酊大醉，夜宿龙舟之上。事变当晚，在内应的引到下，徐羡之、檀道济众人率兵杀入皇宫，刘义符平日并无恩德，关键时刻众叛亲离，禁军将士看到顾命大臣带头叛乱，所以并不抵抗。
众人冲到龙舟之上，发现刘义符还在酣睡，直到身边侍从被害时，才将刘义符惊醒。刘义符被收缴皇帝印玺，软禁于故居太子宫。之后，徐羡之以张太后的名义，废宋少帝刘义符为营阳王，将刘义符送往吴郡金昌亭软禁居住。
