总之，为了保证高贵的血统，五姓七宗族内之人可以通婚，但是坚决不与外姓家族的人论及婚嫁，说句难听的话，就是他们对其他家族甚至包括皇室宗亲根本不屑一顾，他们这种傲慢的做法直接把皇家给激怒了，虽然几大家族在建立朝代之际出过大力，立下很多的功劳，但是，身为天下至尊的皇室怎么可能忍受有凌越其上的超然家族存在呢？
因此，自隋唐以来，曾有多位君王一直想要削弱他们的影响力，比如雄才大略的唐太宗李世民就因为无法忍受他们的傲慢，命令重臣修《氏族志》，然而，在修撰初稿的时候，编修者居然无视皇室，而是将"山东士族"中的博陵崔氏排为天下第一，唐太宗当然不干了，马上让其拿回去重改，皇室宗亲的地位这才被抬高，只是最后却收效甚微，对五姓七宗几乎没造成任何影响。
隋文帝在位时，也曾废除过九品官人法，改为科举取士，目的便是选取人才，用以摧毁门阀士族的任官系统，可惜的是，因为隋朝存在时间太短，收效不大，即使在唐朝初年的时候，也因科举制度不发达难以起到作用。
等到了武则天时期，随着科举制度逐渐完备，进士受到越来越多的重视，地位越来越高，世家大族在人才方面的优势才被逐步蚕食，影响力开始出现衰微的趋势，但是他们在民间的威望依然无法撼动，这样的状况一直贯穿于整个唐朝年间。
