IT之家 2024年10月26日
谷歌出品:大模型生成 RPG 游戏,情节角色全自定义
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

谷歌和北卡罗来纳大学教堂山分校的研究团队开发了一种基于大模型的 RPG 游戏生成技术,可以根据用户输入创建游戏环境和角色动作。这项研究名为“Unbounded”,灵感来自《模拟人生》,用户可以自定义角色的人生,并与角色进行实时互动。该团队还开发了基于 LLM 的游戏引擎,能够生成连贯的叙事和上下文角色响应,并引入了动态区域图像提示适配器,以生成视觉一致的角色和环境。这项研究表明,大模型可以用于生成无限游戏,未来大多数游戏都将完全由生成游戏组成。

😄 **角色个性化与实时互动:** 研究团队开发的游戏名为“Unbounded”,用户可以自定义角色的人生,并与角色进行实时互动。角色的饥饿度、能量和兴趣度会随着环境进行相应更新,用户可以通过喂养、玩耍和引导角色与他互动,但需要保证角色的健康状态。

🤖 **基于LLM的游戏引擎:** 该团队开发了一个基于 LLM 的游戏引擎,能够保持游戏机制的一致性,生成连贯的叙事,并实时生成上下文角色响应。这个游戏引擎是在两个协作性强的 LLM Agent 自动生成的数据基础上进行微调的,无需人工注释。

🖼️ **动态区域图像提示适配器:** 为了生成视觉一致的角色和环境,研究团队引入了新型动态区域图像提示适配器(Regional IP-Adapter)。该适配器将游戏环境和角色外观作为图像生成的条件,并通过动态掩码调制来减少环境和角色之间的干扰。

🚀 **无限游戏的未来:** 研究团队认为,这项研究表明,大模型可以用于生成无限游戏,未来大多数游戏都将完全由生成游戏组成。

📚 **研究团队:** 这项研究的主要来自谷歌和北卡罗来纳大学教堂山分校团队,一作为上海交大校友 Jialu Li,目前是北卡罗来纳大学教堂山分校五年级博士生。

现在,大模型能生成 RPG 角色扮演游戏了。根据初始用户输入,它能设置游戏模拟环境,并在环境中生成角色动作。

来自谷歌,北卡罗来纳大学教堂山分校新研究,他们尝试的第一款游戏叫作 Unbounded,灵感来自《模拟人生》。

用户可以自定义角色的人生,比如这位名叫 Archibus 的巫师,他的饥饿度、能量和兴趣度会随着环境进行相应更新。

角色可以自由探索各种环境,进行各种可能的动作和互动。游戏按照交互速度,每秒就会刷新一次。

用大模型生成无限游戏

研究团队引入了一个生成无限游戏这个概念。

“无限游戏”指以延续游戏为目的游戏,生成无限游戏就是即通过使用生成式模型,超越传统受限的视频游戏。

无界(Unbounded)就是一款完全由生成式模型封装的角色生活模拟游戏。你可以虚拟世界中通过喂养、玩耍和引导角色,与他互动,但需要保证它的健康状态。

基于此,他们生成游戏的主要属性包括:角色个性化、游戏环境生成、开放式互动、实时生成。

在语言方面,他们开发了一个基于 LLM 的游戏引擎。这个游戏引擎能够保持游戏机制的一致性,生成连贯的叙事,并实时生成上下文角色响应。

他们的专业模型是在两个协作性强的 LLM Agent 自动生成的数据基础上进行微调的,无需人工注释。

以 Gemma-2B 为例,经过微调之后的游戏引擎,在状态更新、环境相关性、故事连贯性和指令遵循方面都表现得更为出色。

在视觉生成方面,他们引入了新型动态区域图像提示适配器(Regional IP-Adapter)。该适配器可在保持多幅图像视觉一致性的同时,生成一致的角色和环境。

具体来说,它将游戏环境和角色外观作为图像生成的条件,而游戏环境和角色外观则由交叉注意力层中注意力输出所获得的动态掩码调制。

这是为了减少环境和角色之间的干扰,使两者都能可靠地出现在场景中。

与之前的方法相比,他们的区域 IP 适配器采用了区块丢弃技术,能持续生成具有高度字符一致性和环境一致性的图像。

一作为上海交大校友

这篇研究主要来自谷歌以及北卡罗来纳大学教堂山分校团队。

其中一作 Jialu Li 目前是北卡罗来纳大学教堂山分校五年级博士生,本科毕业于上海交大,随后在康奈尔大学获得硕士学位。

对于这项研究,谷歌导师 Nataniel Ruiz 兴奋表示了对生成游戏的看好:未来大多数游戏都将完全由生成游戏组成。

想想《龙与地下城》等桌面角色扮演游戏的无限性 —— 并试着想想这将如何应用于《上古卷轴》或《艾尔登法环》等游戏。

论文链接:

参考链接:

本文来自微信公众号:量子位(ID:QbitAI),作者:白小交

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

大模型 RPG游戏 无限游戏 生成式模型 LLM
相关文章