魏征推荐的两个人都出了问题，李世民难免不会怀疑了。最为关键是的，魏征之前也曾在太子门下做过官，而且和侯君集和杜正伦共过事，因此李世民没有理由不怀疑魏征。
还有一点让李世民对魏征不满意。魏征即将进谏以及与太宗争吵过程的记录拿给了史官褚遂良，这就好比将皇帝吐口水、骂脏话的细节呈现在世人面前了，李世民自然不会高兴了。
因此，李世民推倒了魏征的墓碑，也就毁掉了之前书写的碑文。
不过后来发生一件事，让李世民后悔万分。贞观十九年（645年），李世民亲征高句丽，虽然取得胜利，但没有灭了高句丽，而且对照以往战况，唐军损失惨重，李世民隐隐然有所悔意，不仅慨然长叹，要是魏征在，我就不会贸然征战了。有感于此，李世民以少牢之礼祭祀魏徵，并且重立墓碑。
李世民要维护鱼水君臣的关系，也要树立明君的形象。魏徵碑倒而立，说明了谋反事情得以澄清之外，也说明了李世民治国为君的微妙心态。
