后来还发生一件事，李元吉被杀死后，他的王妃杨氏还被恩准抚养几个幼女，因为她与长孙皇后关系很好，经常在一起聊天家常。后来被李世民看上了。不顾大臣们的坚决反对，他居然把弟媳杨氏纳入宫中。
后来杨妃还为李世民生下一子，就是后来的曹王李明。虽然杨妃一直没有得到正式的名份，也是因为她的身份过于特殊，但她却得到了李世民的格外恩宠。连皇后去世后，还想立她为皇后，后来实在看不过眼的明镜魏征的强力干涉才没有达成。
这几件事下来，李世民不仅杀兄弟，逼父，还霸弟媳，这几着棋下来，实在是让他名声大降。后来也不知道他是不让后人写，还是有意立这个唐太宗，在史记里却非常少提及这些事，反正他的丰功伟绩一直传颂。
