杨广上位之后把十二卫扩充成卫统府，其目的就是加强中央力量以及分散将领权利，试图削弱关陇集团对军事的控制力。
而且准备迁都洛阳，这样就能减少关陇集团对他的束缚。迎接娶萧皇后就是拉拢江左集团的信号，因为在当时兰陵萧氏是江左集团的核心。开进士科也是想着启用山东集团，然后试图减小关陇集团对朝廷的控制。三次东征也是想耗尽关陇集团的军事力量，但是没想到八柱国之一李虎的后人李渊造反了。之后关陇集团开始改换门庭，八柱国中的宇文氏也反了杨广。
唐朝的打击
在打击关陇集团这件事上隋朝虽然没有完成，但是他起了一个开头，而后续的唐朝则是接过这一任务，准备对关陇集团动手。
李渊是关陇集团中的一员，山东集团中的陇西李氏与他交好，而且荥阳郑氏是李建成的岳父，范阳卢氏也和李渊交好，弘农杨氏是李元吉的岳父，长孙氏是李世民的岳父。
如果皇位给了李建成，那么那些世家都有可能得到进一步的发展。只不过之后的皇位被李世民夺取了，而当时的山东集团对李家有点看不起，甚至李世民想要和山东集团联姻都被人家拒绝了。自此李世民对世家的态度也发生了变化，皇室李家竟然配不上五姓七望，这一点就让他有点恼火了。
随后李世民大力提高皇家李姓和外戚长孙氏的地位，而且还弄了个《氏族志》来打击其他世家。
正是因为李世民此举，身为李世民娘舅的长孙无忌成了关陇集团的代表人。李世民死后，李治就和关陇集团展开了交锋。当时李治想要立武则天为皇后，但是遭到了长孙无忌、褚遂良等人的反对，也就是关陇集团的反对。
当时的武则天拉拢被关陇集团打压的大臣，并且逐步拉拢中间派和打压反对派，当褚遂良被贬的时候，反对派开始走下坡路。
直到李勣表态说这是皇帝的家事，皇帝自己做主就好了。当时的李勣是军方代表，更是李世民留下来的旧臣，他的话还是很有分量的。
