Recursive發布編碼模型Flint並開放權重
人工智能創業公司Recursive於美國時間10月21日發布首個模型Flint:總參數398億、每個token激活約25億的混合專家編碼模型,權重以Apache 2.0許可開放。公司稱模型從零構建,用時不足4個月。
模型規格
Flint採用混合專家架構,總參數398億,每個token激活約25億,定位為編碼模型。權重已以Apache 2.0許可開放,開發者可自由下載、修改及商用,降低了使用門檻。
開發過程
行政總裁兼聯合創始人Richard Socher解釋,模型開發的大部分工作由公司自動化研究系統Eureka Machine完成,模型管線的幾乎每個環節都由人工智能完成並改進,整個項目從零開始不足4個月。
自動化研究趨勢
以自動化系統主導模型開發,是近月業界關注的新方向。此類系統能自動設計實驗、迭代方法與優化訓練流程,若成效屬實,將改變人工智能研發的人力結構,亦引起對科研自動化程度的討論。
開源意義
選擇以Apache 2.0開放權重,令外界可以直接檢視模型能力,亦延續近月開源編碼模型競爭加劇的趨勢。對企業用戶而言,開放權重意味着更低的部署成本與更高的自主性。
