关于父亲李渊同法雅等僧众的交往，李世民也很了解。他在贞观元年命杜如晦清查佛门败类，其目的之一估计就是斩断某些佛教势力与李渊的勾结。还俗在家的智实修书给杜如晦，检举法雅的不轨行为。但杜如晦的进度似乎相当缓慢，至少对法雅不具备丝毫的威慑力。看来时机尚不成熟，亦即李渊的''面子''余威犹存。
【1、《旧唐书》：（贞观）三年，有沙门法雅，初以恩幸出入两宫。2、《续高僧传》：武德七年，猃狁孔炽，屡举烽爟……有僧法雅，夙昔见知，武皇通重，给其妻媵，任其愆溢……奏请京寺骁扞千僧用充军伍，有敕可之，雅即通聚简练别立团队……（智）实时年二十有一……乃致书于雅曰：……子每游凤阙，恒遇龙颜，理应洒甘露于帝心，荫慈云于含识。何乃起善星之勃见，鼓调达之恶心，令善响没于当时，丑迹扬于后代……雅得书逾怒，科督转切，备办军器，克日将发。（智）实腾入其众，大哭述斯乖逆，坏大法轮，即是魔事。预是千僧同时号叫，听者寒心下泪。（智）实遂擒撮法雅，殴击数拳……雅以事闻帝……付法推刻，即被枷禁，初无怖色。将欲加罪，仆射萧瑀等奏称''精进有闻''，敕乃罢令还俗。贞观元年，敕遣治书侍御史杜正伦捡挍佛法，清肃非滥。（智）实恐法雅犹乘先计，滥及清徒，乃致书于使曰：窃见化度寺僧法雅……乃于支提静院，恒为宰杀之坊；精舍林中，镇作妻孥之室。】
这就足以解释法雅有恃无恐的原因。一是他本身鼠目寸光、不识深浅，二是李渊还有实力做他的靠山。至于李渊、裴寂跟他谈论过哪些话题，也颇有想象空间，估计是：''张三问您好、说您那时候才是他的好光景呐！''或者：''王二麻子说当今圣人乳臭未干，希望您多给他把把关……''诸如此类。
李世民当然不会听之任之。他对父亲的容忍是有原则的，不能养虎遗患、不能妨害大局，这是他的底线，不容挑战。
