IXThinker IXThinkerAI 動態 睇晒最新動態 →
IXThinker·2025-12-27 17:20

英偉達 Nemotron 3 連訓練配方都開源

模型發布開源

英偉達發布自稱最高效的開放模型家族 Nemotron 3,不僅開放權重,更把逾十萬億 token 訓練數據、預訓練與後訓練軟件及完整訓練配方全部公開,開放程度在主流模型中相當罕見。

架構拼效率

Nemotron 3 在架構層面追求推理效率最大化:採用混合 Mamba-Transformer MoE 架構,解決傳統自注意力隨序列增長掃描 KV Cache 的開銷問題,並引入 NVFP4 低精度訓練技術,整體推理速度提升一點五至三點三倍。

IXThinker 會員內容

呢篇係 Archive 內容。登入即可解鎖全文,仲有成個 15,000+ 篇、每日更新嘅 AI 動態資料庫。

免費登入/註冊解鎖全文 →

Google 或電郵地址即可,即刻解鎖。