于是，武则天的头号马仔许敬宗向唐高宗陈述，认为李忠已经不适合再当太子，唐高宗也深以为然，废黜了李忠的太子之位，换成武则天的儿子做太子，而李忠被封为梁王，辗转到房州任职，后又被废为庶人，去了李承乾曾经待过的黔州，被监视居住。
在武则天手上，连自己的儿子都逼死过一个，何况别人的儿子，李忠曾经的皇太子身份，始终是缠在他身上的一道枷锁，上官仪和唐高宗密谋废后事件事发后，武则天安排人诬告上官仪谋反，顺带也把李忠牵扯进来，唐高宗因而赐死李忠。
李贤是武则天的第二个儿子，在兄长李弘突然去世后，接替他成为皇太子，李贤的能力很强，得到了满朝文武的拥戴，相应的，也成为武则天政治上的最大对手。
而且，因为有谣言说，李贤不是武则天亲生，而是武则天的姐姐韩国夫人武顺和唐高宗所生，让李贤开始疏远武则天，不过，这应该是不满武则天的门阀造出的谣言，用意是离间李贤和武则天的关系。
