门阀制度萌芽于东汉，形成于曹魏，发展于西晋，到东晋其势力已达顶峰，至南朝门阀制度逐渐走向下坡路。隋朝建立科举制，门阀制彻底崩溃。

在曹魏西晋时，王谢袁萧四大家族的地位并不高于其他士族，有的甚至尚未进入士族行列。但由于王、谢官位的上升，才被列为门阀；晋明帝的世子妃庾文君因晋成帝只有四岁临朝听政，庾氏家族开始以外戚身份崛起。之后庾家没落，让出来的空位，经过几番权力斗争，最后的赢家桓温，得到了荆州刺史的位置。东晋进入桓氏时代由于梁末侯景之乱对南朝士族予以沉重打击与门阀士族自身的腐朽，四大家族及其他士族逐步走向没落和衰亡。