RSI-Anything:用世界模型推動跨領域遞迴自我改進

RSI-Anything 把預測、行動回饋與學習串成循環,讓同一套框架應對程式修復、GUI 操作及實驗規劃。

RSI-Anything overview: diverse domains, JEPA-Anything predictive foundation, action and interaction, and recursive self-

當系統需要由多個候選行動中揀選較佳方案,RSI-Anything 會先預測後果,再透過外部評估修正下一輪決策。它屬於建基於世界模型的通用框架,處理的是模型如何利用互動經驗持續改善,而不只是在單次任務中產生答案。

框架以 JEPA-Anything 作為預測基礎,將候選生成、預測引導選擇、外部評估、學習和保留成果串成「Propose → Predict → Select → Evaluate → Learn → Retain」循環。不同領域可自行定義狀態、行動、預測目標和回饋,因此同一流程能延伸至 code repair、GUI interaction、laboratory planning、reaction optimization 及 immune science。

可從以下幾點理解其價值:
– 以世界模型預測行動後果,減少只靠試錯作決策的需要
– 以外部回饋檢驗選定行動,將經驗帶入下一輪學習
– 支援程式修復、GUI 操作和實驗規劃等不同工作情境
– Hugging Face 提供 RSI-Anything 數據集,包含 image、text 及 3.2k rows,分為 train 3k 與 test 200

資料集包括 historical_actions、candidate_next_actions、reasoning 和 next_action,較適合研究候選行動選擇及實驗流程推理;項目未在所提供內容中列出具體性能數字,因此應先視為研究框架與資料資源,而非已證實能普遍自我提升的成熟系統。

項目主頁 · GitHub

Categories: 開源, 模型, 世界模型, Image, 框架, Python, Dataset 數據集