不过当时已经有了太子，即李瑛。有没关系，谁也不能保证做了太子就一定能成为皇帝，要知道，自古至今，太子无法顺利继位的多了去了。武惠妃和自己的女婿杨洄开始谋划除掉太子，他们的手段并不高明，就是杨洄在外搜集太子的不法行为，为武惠妃吹枕边风。
武惠妃经常在李隆基耳边说李瑛结党想对武惠妃母子不利，还说李瑛、李瑶和李琚经常在一起为他们的母亲鸣不平等等。李隆基听得多了就想废太子，但被张九龄劝阻，一计不成再生一计，武惠妃派人将李瑛、李瑶和李琚叫进宫中，说是宫中遭了贼，让他们擒贼，三王二话不说就带着人进宫。
而另一边，武惠妃又告诉李隆基说三人谋反了，这个时候张九龄已经不是宰相，保护不了李瑛了，而新任宰相李林甫早已经心向着武惠妃，因此当李隆基询问宰相意见的时候，李林甫表示这是陛下的家事，不需要询问别人，那李隆基就按照自己的心意将三子废为庶人，不久三人都被赐死了。
太子已除，还附赠两王，武惠妃有李隆基的宠爱，还有宰相李林甫的示好，这个时候她是不是能够如愿让李瑁成为太子呢？并没有，不仅没有，武惠妃还搭上了自己的命，《旧唐书》记载："其年，武惠妃数见三庶人为崇，怖而成疾，巫者祈请弥月，不痊而殒。"
