关于李世民为什么霸占弟媳为妻，坊间有不同的说法：
有人说这是因为李世民特别好色，在位期间，就从来没有停止过对天下美女的收罗，一旦喜欢，便纳入后宫，不说多少，著名的就有贤惠的长孙皇后，美若天仙的萧皇后，还娶了韦贵妃和韦昭容这一对寡妇姐妹，还有那个武则天，也曾经是他的身边尤物。
同时，杨氏也的确是个大美女，史载："杨氏玉貌雪肤，眉目如画，身材婀娜。"足见杨氏姿色和气质俱佳，英雄难过美人关，众人垂涎，李世民亦未能免俗。据说，兄弟没闹翻之前，李世民有一次到弟弟的府上做客，叫杨氏作陪，席间，李世民盯着杨氏看，目不转睛，让李元吉都不好意思了，只得善意提醒哥哥，李世民才一梦惊醒，慌乱甚至打翻了酒杯。
李世民喜欢杨氏，那也是十分真心的。李世民与杨氏生下一子李明，后封曹王。贞观后期，李世民对杨氏更加宠幸，曾一度要立她为皇后，但魏征却谏阻道："陛下方比德唐虞，奈何辰嬴自累。"意思是说，陛下想立志做个尧舜一样的明君，怎么能立弟媳为后呢？这不是授人以柄、让人耻笑吗？
