當手機或電腦彈出視窗、載入延遲、介面元素位置變動，原本寫好的 GUI 操作步驟往往幾步之後就失效。EvoSkill-GUI 正正回應這個痛點——它是浙江大學 ZJU-REAL 團隊推出的開源框架，毋須微調，就能讓 GUI Agent 把「技能」從靜態提示詞變成可即時修補、可重用的程序知識。
以往的 skill-based agent 把規劃、定位、復原規則全部塞進同一份文件，出錯時難以精準修補。EvoSkill-GUI 將每項技能拆成結構化套件，內含計劃、後備定位、復原規則、無障礙工具、檢索 metadata 與失敗案例等獨立檔案，並以 metadata 索引，後續按意圖、應用、平台等條件快速取出對應經驗，而非逐字比對長篇技能文件。
它的核心設計是「同一個骨幹模型」兼任執行者與批評者。執行時若觀察到介面與計劃不符，會即時修補局部錯配，避免小錯滾成大錯；失敗後模型會在嚴格資訊隔離下診斷軌跡，只針對出問題的檔案做精準編輯，毋須額外更強的反思模型輔助。
在 MobileWorld、AndroidWorld、OSWorld 三個基準上，無論通用模型還是 GUI 專用模型，EvoSkill-GUI 都帶來穩定提升，最高絕對增益分別為 +16.2、+6.0、+10.5 個百分點。對做行動 App 自動化、桌面助手或 RPA 的團隊而言，這種毋須重訓又能累積經驗的設計相當實用；不過整套機制依賴骨幹模型本身的反思品質，任務越長、介面越動態，回報會越明顯。
重點摘要：
- 訓練免費用：以 single-backbone self-evolution 機制，省掉外部批評模型與微調成本。
- 技能拆件：把計劃、定位、復原拆成獨立可編輯檔案，方便精準修補。
- 即時修正：在 rollout 內偵測到介面變化就立刻修，避免錯誤擴散。
- 資訊隔離批評：批評階段只看指令、觀察與動作，避免偷看草稿或答案。
- 跨基準驗證：在 MobileWorld、AndroidWorld、OSWorld 三項皆有顯著絕對增益。