MIT自蒸餾微調SDFT破解災難性遺忘
MIT團隊提出自蒸餾微調方法SDFT,讓模型在持續學習多項新技能的同時幾乎不忘記舊知識,準確率更超越傳統監督微調,為破解災難性遺忘難題、邁向終身學習AI系統提供新路徑。
靜態模型困境
AI系統雖然表現強大,卻往往在部署後陷入「靜態」,難以透過參數更新持續進化;核心挑戰在於吸收新知識的同時,不會覆蓋或丟失原有能力,令模型難以動態成長。


IXThinker 會員內容
呢篇係 Archive 內容。登入即可解鎖全文,仲有成個 15,000+ 篇、每日更新嘅 AI 動態資料庫。
免費登入/註冊解鎖全文 →Google 或電郵地址即可,即刻解鎖。
