有人向唐太宗密奏，魏征纳谏的奏折都是一式两份，一份上呈给皇上，另一份递交给史官。这件事大大触怒了太宗。
对魏征而言，他这么做的原因或许是为了让史官如实记录历史，避免后世出现同样的错误。但对太宗而言，魏征这么做是为了在后世名留青史，这是不可容忍的。
唐太宗倾其一生塑造的完美帝王形象，怎么会容许他的缺点被记录在史书上。传闻，唐太宗李世民为了保留后世美名，甚至几次下令修改史书，成为历史上第一位篡改历史的皇帝。
由于这两件事，唐太宗对魏征大为失望，?下令将魏征的墓碑推倒，同时撤销公主和魏征长子的婚约。
不过，唐太宗后来后悔太过冲动，贞观十九年，在消灭高句丽后，令人将魏征的墓碑重新立了起来。
