永徽四年（653年），长孙无忌借高阳公主和房遗爱谋反案大搞冤狱，将跟自己不对付的吴王李恪、江夏王李道宗全都牵扯进去。高宗在朝堂上求情，希望能放自己的亲哥哥和亲叔叔一条生路，满朝大臣却都不敢站出来说话。
可以说，在执政初期，唐高宗被长孙无忌集团压制得死死的。而武则天的出现，才是唐高宗在政治上突围的开始。
永徽六年（655年），唐高宗想要废王皇后，立武则天为后，长孙无忌、褚遂良等当然是坚决地、坚定地、坚持地反对。没想到高宗这次一改往日作风，不顾元老派反对，强势改立皇后。这下，双方的矛盾彻底尖锐化。4年后，有人密告长孙无忌谋反，李治借此契机干脆利落地料理了亲舅舅，贬官流放不算，随后又让人逼迫长孙无忌自尽。大树一倒，关陇集团许多元老派人物也都受到株连。
后世说起来，好像都是武则天的锅；包括电视剧拍起来，重点也是表现，李治对武则天的爱有多深。但是扒一下历史脉络你就发现：废立皇后事件之后，高宗突破了长孙无忌为首的贵族集团的政治包围圈，收拾了一波旧臣；而且此后，武后的支持者李义府、许敬宗等先后倒台。受到重用的是哪些呢？如曾受褚遂良打击的韦思谦，被唐太宗冷落的杜正伦，武后的政敌、王废后的族兄王方翼……唐高宗组建了以这些人为核心的自己的政治班底。
