李世民对于李靖这种老班子都能如此对待，更何况后来加入的徐茂公呢？因此，徐茂公很明白自己在李世民心中的斤两。哪怕自己为唐朝开疆扩土，远征高句丽，立下不世战功依旧保持初心。因为他知道，这些都是帝王的权术罢了。
果不其然，徐茂公的担心是对的。在李世民眼中，徐茂公终究是一个棋子罢了，如果他不摆正自己的位置，李世民可以毫不犹豫的将其诛杀。
贞观二十三年（公元649年），李世民卧床不起，已到须弥之际。他将继承人李治叫到跟前，开始交代后事，告诉新皇登基之后的"人员安排"。李世民告诫李治：
无忌、遂良在，汝勿忧天下！
