世家的衰落的原因有很多，一是隋唐都是统一的王朝，中央集权加强，皇帝不可能允许世家大族为所欲为，因此有意压制。

二是，隋唐两朝都是依靠关陇军事集团而取得的国家政权，因此在隋唐两朝，关陇军事集团力量强大，这自然就阻碍了门阀世家的发展。

三是，从隋朝科举制开了先河，到唐朝科举制彻底的成熟，诸多的寒门子弟的崛起，也就渐渐地断绝了世家大族掌控人才晋升的路途，而随着时间的推移，世家大族对于地方和朝堂的掌控力，也在逐渐的衰弱甚至消亡。

这里不得不着重提一下科举制。

科举从开创至清光绪三十一年（1905年）举行最后一科进士考试为止，前后经历一千二百余年。

科举制的首创时间史学界存在争议，有汉朝、隋朝、唐朝多种说法。

部分历史学家以隋朝有分科举人与进士科为由认为科举制开始于隋朝。

部分历史学家考证证明科举制开始于汉朝，证明汉朝不仅有分科举人、按科举人，汉朝还有考试进用，而且没有可靠证据证明隋朝有进士科。

部分历史学家考证证明科举制的本质是唐朝开始的允许自己报名参加，以及考试黜落法，科举制开始于唐朝。

这三种说法还是第一种说法最让人信服。

开皇七年，隋文帝杨坚下诏每州岁贡三人，当时主要是明经和秀才两科，史称“贡举”，正式确立了科举制度。

也有人将隋代设立进士科作为科举制度的开端，大业三年，隋炀帝定十科举人，其中有“文才秀美”一科，当即进士科……这是科举（主要是进士科）制度的开始，将进士科的出现作为科举制度起源的标志，持隋朝产生说的人一部分认为进士科设立时间在大业年间。