IXThinker·2025-04-03 05:40

ECLeKTic：跨語言知識遷移新基準

一個評估大語言模型跨語言知識遷移能力的新基準ECLeKTic近日受到關注。它以閉卷問答形式檢驗模型僅憑內部知識作答的表現，揭示同一知識在不同語言之間的可及性落差，目標是推動更公平的多語言模型發展。

閉卷問答設計

基準以閉卷問答為核心任務，要求模型在無法檢索外部資料的情况下，僅憑內部知識回答與特定語言相關的冷門問題。這種設計把考驗集中在參數中儲存的知識本身，而非依賴搜尋工具的檢索能力，更能反映模型真實的跨語言知識儲備。