五姓七望是唐朝时期的显赫士族，像崔、卢、郑、王这些大姓掌握着官职和财富。他们衰落主要因为科举制度兴起，普通百姓也能当官了，士族垄断地位被打破。加上安史之乱、黄巢起义这些战乱，士族大量死亡或逃散，影响力自然就没了。宋朝时科举人数翻倍，士族彻底没落了。

五姓七望在唐朝中期开始走下坡路，具体原因有几点。第一科举制度从隋朝开始发展，到唐朝武则天时大规模推行，每年录取人数从几十人增加到几百人，普通百姓有了上升通道。比如《新唐书》记载唐朝共录取进士五万多人，而五姓七望子弟占比从初唐的30%降到宋代的5%。第二战乱冲击，安史之乱导致河北士族被诛杀，黄巢起义又摧毁了江南士族庄园。第三经济重心南移，士族依赖的北方土地减少，宋朝时江南农民起义频发，士族失去控制力。比如北宋时期江南科举录取人数是唐代的四倍，而五姓七望在朝中担任宰相的比例从唐代的40%降到宋代的8%。这些变化加起来，到南宋时五姓七望只剩零星存在了。