永徽初期，褚遂良与长孙无忌辅政，代表元老派势力，高宗年轻气盛，不甘心受二人左右，借皇后废立事件贬逐二人，是其矛盾激化的必然结局。褚遂良反对废掉王皇后，是因为"皇后出自名家，先朝所娶"；反对立武昭仪为皇后，是因为武氏出身寒微。当时褚遂良以顾命大臣自居，态度极其蛮横。高宗大怒。武氏尚未立为皇后，竟在皇帝、大臣面前气势汹汹，口出不逊之言，似不近情理。以后褚遂良求赦免，高宗不同意。由此可见，高宗贬逐褚遂良是因为他"悖戾犯上"，触犯皇威。
《新唐书》说这是由于高宗"昏懦，牵于皇后"，缺乏事实根据。
其二、高宗委政于武后，也是出于本人的意愿。
高宗因病委政于武后，是由于武后"处事皆称旨"，二人有共同的政治见解。高宗对武则天的信任至死不变，遗诏
"军国大事有不决者，取天后处分"，
