IXThinker·2025-12-23 21:10

NeurIPS獲獎論文：概念擠壓催生規模定律

「模型越大性能越好」是大模型時代最經驗性的觀察，但其成因長期未明。麻省理工學院劉逸舟即將主講的這項獲NeurIPS 2025最佳論文亞軍的研究，提出「表徵疊加」理論，為神經規模定律給出解釋。

規模定律之謎

神經規模定律指模型的損失函數隨規模以冪律形式下降，這一經驗規律支撐了整個大模型競賽，但其起源一直缺乏清晰解釋。理解它為何成立，對判斷擴展路線的天花板至關重要。