李渊当皇帝的时候，自然没人敢说什么，可老皇帝一退位，李世民的手下就开始冒头攻击李渊。例如，贞观二年，玄武门之变第二年，这年的雨水下得少，于是中书舍人李百药就上书说，这是因为太上皇征召太多的宫女，皇宫里"阴气郁积"才导致了干旱。
于是，李世民就下令，将李渊身边的宫女裁减掉3000人，全部驱逐出宫。
而李世民对李渊的报复才刚刚开始。
李世民当了皇帝，自然要整治一些以前不听自己话的人。李渊最信任的老臣裴寂便是其中之一。玄武门之变前，裴寂一直支持太子李建成。玄武门之变当天，别的大臣都在李渊身边拍马屁，说秦王李世民人心所向之类的话，唯独裴寂一言不发。
