您的位置 首页 百科

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

AI玩黑神话,第一个精英怪牯护院轻松拿捏啊。 有方向感,视角也没有问题。 躲闪劈棍很丝滑。 甚至在打鸦香客和牯护院时,AI的胜率已经超过人类。 而且是完全使用大模型玩,没有使用强化…

AI玩黑神话,第一个精英怪牯护院轻松拿捏啊。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

有方向感,视角也没有问题。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

躲闪劈棍很丝滑。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

甚至在打鸦香客和牯护院时,AI的胜率已经超过人类。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

而且是完全使用大模型玩,没有使用强化学习。

阿里巴巴的研究人员们提出了一个新型VARP(视觉动作角色扮演)智能体框架。

它能直接将游戏截图作为输入,通过视觉语言模型推理,最终生成Python代码形式的动作,以此来操作游戏。

以玩《黑神话·悟空》为例,该智能体在90%简单和中等水平战斗场景中取胜。

GPT-4o、Claude 3.5都来迎战研究人员以《黑神话·悟空》为研究平台,一共定义了12个任务,75%与战斗有关。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

他们构建了一个人类操作数据集,包含键鼠操作和游戏截图,一共1000条有效数据。

每个操作都是由原子命令的各种组合组成的序列。原子命令包括轻攻、闪避、重攻击、回血等。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

然后,他们提出了VARP智能体框架。

主要包含动作规划系统和人类引导轨迹系统。

其中动作规划系统由情境库、动作库和人类引导库组成,利用 VLMs 进行动作推理和生成,引入分解特定任务的辅助模块和自我优化的动作生成模块。

人类引导轨迹系统利用人类操作数据改进智能体性能,对于困难任务,通过查询人类引导库获取相似截图和操作,生成新的人类引导动作。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

同时VARP还包含3个库:情景库、动作库和人工引导库。

这些库中存储了agent自我学习和人类指导的内容,可以进行检索和更新。

动作库中,“def new_func_a()”表示动作计划系统生成的新动作,“def new_func_h()”表示人导轨迹系统生成的动作。”def pre_func()”代表预定义的动作。

动作案例研究和相应的游戏截图。第一行和第二行中的操作是预定义的函数。第三行动作由人工制导轨迹系统生成。

SOAG会在玩家角色与敌人的每次战斗互动后总结第四行和第五行中的新动作,并将其存储在动作库中。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

框架分别使用了GPT-4o(2024-0513版本)、Claude 3.5 Sonnet和Gemini 1.5 Pro。

对比人类和AI的表现结果,可以看到小怪部分AI们的表现达到人类玩家水平。

到了牯护院时,Claude 3.5 Sonnet败下阵来,GPT-4o胜率最高。

但是对于新手玩家普遍头疼的幽魂,AI们也都束手无策了。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

另外研究还提到,由于VLMs推理速度受到限制,是无法实时输入每一帧画面的。

它只能间隔输入关键帧,这也会导致AI在一些情况下错过boss攻击的关键信息。

以及由于游戏中没有明确的道路引导且存在很多空气墙,在没有人类引导下,智能体也不能自己找到正确的路线。

如上研究来自阿里团队,一共有5位作者。

GPT-4o AI不学习就能玩《黑神话:悟空》!精英怪胜率超人类

后续相关代码和数据集有发布计划,感兴趣的童鞋可以蹲下。

One More Thing

AI打游戏并不是一个新鲜事了,比如AI基于强化学习方法打《星际争霸II》已经可以击败人类职业高手。

利用强化学习方案,往往需要输入大量对局。

商汤此前训练的DI-star(监督学习+强化学习),就用了“16万场录像”和“1亿局对战”。

但是纯大模型也能打游戏,还是很出乎意料的。在本项研究中,数据集中的有效数据为1000条。

免责声明:文章内容不代表本站立场,本站不对其内容的真实性、完整性、准确性给予任何担保、暗示和承诺,仅供读者参考,文章版权归原作者所有。如本文内容影响到您的合法权益(内容、图片等),请及时联系本站,我们会及时删除处理。

作者: 一陈不染

为您推荐

连续七年组织公益献血 累计献血量突破13万毫升

在6月12日第22个世界献血者日前夕,200余名来自30多个行业的民众齐聚北京嘉禾妇儿医院,挽袖献血,为生命“加油”。他...

抖音电商保证金缴纳标准大幅降低 助力618生意爆发

2025年6月10日,抖音电商通过「政策开放麦」解读升级商家政策,重点推出保证金政策新规:基础保证金缴纳标准大幅降低,全...

银发经济扩容提速,湖南金证聚焦养老服务新蓝图

近年来,随着人口老龄化进程不断加快,养老服务体系的完善与“银发经济”的成长性逐渐成为宏观政策关注的重点方向。从产业供需结...

鹤壁爱民医院五月健康盛宴:五一特惠与母亲节关爱并行

五月,是劳动的赞歌奏响的时节,也是感恩母爱、传递温情的日子。鹤壁爱民医院在这个充满意义的月份,为广大市民开启一场健康盛宴...

果立方,在上海闯韩成功!

当我们还在讨论,去韩国该买哪款面膜打哪款水光针时,大家都没有预料到,文化输出的箭头正悄悄调转了方向,中国的果立方已经在韩...

发表评论

返回顶部