IXThinker·2025-02-03 13:30

Scaling Law撞牆了嗎？LLM擴展現狀拆解

Scaling Law 是否撞牆，是近期 AI 領域最熱門話題之一。資深機器學習研究科學家 Cameron R. Wolfe 更新長文，詳述 LLM 擴展的現狀與他對 AI 研究未來的看法。

擴展邏輯

近年 AI 的大部分進展，尤其是大型語言模型，都建立在 scaling 之上：只要用更多數據訓練更大模型，就能在更多任務上取得更佳表現，這一規律曾屢試不爽。