IXThinker·2025-04-16 10:40

ICLR時間檢驗獎揭曉 Adam壓注意力機制

ICLR 2025時間檢驗獎重磅揭曉，兩篇十年前的論文分奪冠亞軍：一是華人科學家Jimmy Ba參與的Adam優化器，二是Bengio團隊的注意力機制研究，兩者至今仍是深度學習的基石。

Adam奪冠

斬獲大獎的是xAI工程師、Hinton高徒Jimmy Ba發表的Adam優化器論文。該算法大幅提升模型訓練效率，問世十年後仍是業界應用最廣的優化方法之一，展現出驚人的持久價值。