他与其弟渤海王李奉慈一直都为高祖所鄙视。高祖曾经说过："我怨仇有善，犹擢以不次，况于亲戚而不委任？闻汝等唯昵近小人，好为不轨，先王坟典，不闻习学。今赐绢二百匹，可各买经史习读，务为善事。"
从中足以可见李渊对于这个文武都成不了的亲侄儿，是相当的失望了。为了让他做善事而赏赐给他的布匹钱财，他也是用在了酒食美色上面，着实把高祖气了个半死。
然而就是如此一位混吃混喝的尊贵王爷，在多位皇子王爷被杀之时，他还安然无恙，加官封爵。
在李世民称帝之后，对于这个只会享乐而不干正事的哥哥，自然是没有感受到威胁的，在位时都是对其敬而远之。而等到了唐高宗李治称帝时，他的地位就更加尊贵了。毕竟这辈分可是高了不少，于是他就开始官运亨通了。
