IXThinker·2025-06-12 18:50

GUI智能體首現反思閉環 犯錯後自行修正

端到端多模態GUI智能體有了「自我反思」能力：南洋理工大學MMLab團隊提出GUI-Reflection框架，讓在手機、電腦上代人操作的智能體學會犯錯、反思、修正。

瓶頸所在

GUI智能體能看懂設備屏幕，模擬人類點擊按鈕、輸入文本，從而完成複雜任務。但現有模型多以近乎完美的離線示範軌跡訓練，缺乏反思與改正自身錯誤的能力，也限制了以在線強化學習激發潛力的空間。