從科幻走進現實，元宇宙概念逐漸清晰
2021年，元宇宙概念如同一顆炸彈投進互聯網行業，掀起了一場數字海嘯，眾多企業紛紛入局，在此新領域展開新探索。那么，加速狂奔的元宇宙究竟是什么？概念翻紅，元宇宙走進資本圈2021年3
AI 玩黑神話，第一個精英怪牯護院輕松拿捏啊。
有方向感，視角也沒有問題。
躲閃劈棍很絲滑。
甚至在打鴉香客和牯護院時，AI 的勝率已經超過人類。
而且是完全使用大模型玩，沒有使用強化學習。
阿里巴巴的研究人員們提出了一個新型 VARP（視覺動作角色扮演）智能體框架。它能直接將游戲截圖作為輸入，通過視覺語言模型推理，最終生成 Python 代碼形式的動作，以此來操作游戲。
以玩《黑神話?悟空》為例，該智能體在 90% 簡單和中等水平戰斗場景中取勝。
GPT-4o、Claude 3.5 都來迎戰研究人員以《黑神話?悟空》為研究平臺，一共定義了 12 個任務，75% 與戰斗有關。
他們構建了一個人類操作數據集，包含鍵鼠操作和游戲截圖，一共 1000 條有效數據。
每個操作都是由原子命令的各種組合組成的序列。原子命令包括輕攻、閃避、重攻擊、回血等。
然后，他們提出了 VARP 智能體框架。主要包含動作規劃系統和人類引導軌跡系統。
其中動作規劃系統由情境庫、動作庫和人類引導庫組成，利用 VLMs 進行動作推理和生成，引入分解特定任務的輔助模塊和自我優化的動作生成模塊。
人類引導軌跡系統利用人類操作數據改進智能體性能，對于困難任務，通過查詢人類引導庫獲取相似截圖和操作，生成新的人類引導動作。
同時 VARP 還包含 3 個庫：情景庫、動作庫和人工引導庫。這些庫中存儲了 agent 自我學習和人類指導的內容，可以進行檢索和更新。
動作庫中，“def new_func_a ()”表示動作計劃系統生成的新動作，“def new_func_h ()”表示人導軌跡系統生成的動作。“def pre_func ()”代表預定義的動作。
動作案例研究和相應的游戲截圖。第一行和第二行中的操作是預定義的函數。第三行動作由人工制導軌跡系統生成。
SOAG 會在玩家角色與敵人的每次戰斗互動后總結第四行和第五行中的新動作，并將其存儲在動作庫中。
框架分別使用了 GPT-4o（2024-0513 版本）、Claude 3.5 Sonnet 和 Gemini 1.5 Pro。
對比人類和 AI 的表現結果，可以看到小怪部分 AI 們的表現達到人類玩家水平。
到了牯護院時，Claude 3.5 Sonnet 敗下陣來，GPT-4o 勝率最高。
但是對于新手玩家普遍頭疼的幽魂，AI 們也都束手無策了。
另外研究還提到，由于 VLMs 推理速度受到限制，是無法實時輸入每一幀畫面的。它只能間隔輸入關鍵幀，這也會導致 AI 在一些情況下錯過 boss 攻擊的關鍵信息。
以及由于游戲中沒有明確的道路引導且存在很多空氣墻，在沒有人類引導下，智能體也不能自已找到正確的路線。
如上研究來自阿里團隊，一共有 5 位作者。
后續相關代碼和數據集有發布計劃，感興趣的童鞋可以蹲下。
One More ThingAI 打游戲并不是一個新鮮事了，比如 AI 基于強化學習方法打《星際爭霸 II》已經可以擊敗人類職業高手。
利用強化學習方案，往往需要輸入大量對局。商湯此前訓練的 DI-star（監督學習 + 強化學習），就用了“16 萬場錄像”和“1 億局對戰”。
但是純大模型也能打游戲，還是很出乎意料的。在本項研究中，數據集中的有效數據為 1000 條。
論文地址：
https://arxiv.org/abs/2409.12889
項目地址：
https://varp-agent.github.io/
本文來自微信公眾號：微信公眾號（ID：QbitAI），作者：小明，原標題《GPT-4o 能玩《黑神話》！精英怪勝率超人類，無強化學習純大模型方案》
本文鏈接：http://www.rrqrq.com/showinfo-45-7750-0.htmlGPT-4o 能玩《黑神話：悟空》：精英怪勝率超人類，無強化學習純大模型方案
聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。郵件：[email protected]
上一篇： 微軟亞洲研究院與上海市精神衛生中心展開聯合研究，借助多模態大模型為認知障礙患者帶來全新訓練方法
下一篇： AI“攻克”CAPTCHA 網站驗證系統
Copyright ? 2016-2023 天津谷騏科技有限公司 版權所有 sitemap.xml
違法及侵權請聯系：[email protected] 津ICP備18001702號
津公網安備 12010102000574號