IXThinker·2026-03-24 16:50

多模態評測的選項依賴與視覺讀數反思

多模態評測基準長期以選擇題為主，模型靠猜選項也能拿高分，掩蓋真實的視覺語言能力。一場學術報告將探討這一局限，並介紹把選擇題轉為可驗證開放問答的ReVeL框架，反思「視覺讀數」在評測中的作用。

選項依賴問題

傳統選擇題評估（MCQA）易讓模型通過「猜選項」獲利，即使視覺理解不足也能得分，測出來的成績與真實能力出現偏差，難以反映模型對圖像內容的實際掌握。