首先李世民推的可不是魏征的墓碑，而是纪念碑。《旧唐书.魏征传》载：“帝亲制碑文，并为书石”，这里的碑文，就是写着魏征功绩的纪念碑。
同时魏征的墓碑可不是网上流传的是死后的第三天被推倒的。首先魏征是在643年正月十七日病死的，《旧唐书.太宗本纪》载：“十七年春正月戊辰，右卫将军、代州都督刘兰谋反，腰斩。太子太师、郑国公魏徵薨”，而李世民推倒魏征的墓碑虽然不确定具体的时间，但是可以明确的是在魏征被置入凌烟阁之后的事情，《旧唐书.太宗本纪》载：“戊申，诏图画司徒、赵国公无忌等勋臣二十四人于凌烟阁”，也就是643年正月二十八日。所以无论如何，魏征的墓碑也不是三天之后被推得，最早也要一个月之后啊！
魏征被李世民称为自己的镜子倒是不假。《旧唐书.魏征传》载：“尝临朝谓侍臣曰：“夫以铜为镜，可以正衣冠；以古为镜，可以知兴替；以人为镜，可以明得失。朕常保此三镜，以防己过。今魏徵殂逝，遂亡一镜矣！”，就是李世民经常跟身边的人说：“用铜镜可以端正自己的衣冠，以史作为镜子，可以知晓兴衰更替，以人作为镜子，可以看清得失。我经常用这样的方式防止自己犯错，但现在魏徵去世，我少了一面镜子”。
当然自古帝王最是无情，这点毋庸置疑，即使是如同李世民这样的千古明君亦是不能落俗。李世民虽然把魏征当作是一面镜子，且在他死后也给予其诸多荣耀，先是追赠他为司空、相州都督，赐谥号“文贞”(为文臣最高等级的谥号)。后还将他的画像凌烟阁中，位列二十四功臣之三。这等荣耀在历朝历代都已算是恩宠有加，可谓是厚恩。
但是没过过久，魏征就因牵扯到一件事，他就受到李世民的薄惩，说是薄惩，是因为他的追赠、官爵、谥号都没有被剥夺，只是记录他功绩的纪念碑被推倒，同时取消了衡山公主与魏徵长子魏叔玉的婚约。
而魏征牵扯到的这件事就是“太子李承乾逼宫谋反”一事，当时他向李世民推荐的有宰相之才的侯君集、杜正伦二人都深陷太子谋反一事，如此李世民就怀疑魏征可能也参与到了谋反的事情中。之后再加上李世民又得知魏征曾两次将谏书给记录历史的褚遂良看，这就让李世民有些怀疑他别有所图。于是不疑有他的李世民就先是取消衡山公主与魏徵长子魏叔玉的婚约，然后派人推倒了自己为魏征亲自刻书碑文的纪念碑。
当然魏征谋反肯定是不切合实际的，他是位忠臣，这是毋庸置疑的事情，他顶多就算是识人不明。但是把谏书给褚遂良看，这倒是有些想要博取清名的意思，但也没有什么大事，谁不想青史留名呢？而这点李世民后人恐怕也是知晓的。
645年，李世民亲征高句丽，唐军虽取得胜利，但是自身伤亡也不小，伤亡近2000余人，而这对于在打战时对自己要求颇高的李世民来说，可谓是惨胜，所以他不禁慨然叹息说：“魏徵若在，不使我有是行也”。此时李世民终于想起了魏征的好，于是回国后就立命驰驿以少牢之礼祭祀魏徵，同时重立纪念碑。
