谷歌通用AI智能体发布 3D游戏玩法要变天了

谷歌通用AI智能体发布 3D游戏玩法要变天了 比如,在《模拟山羊3》(Goat Simulator 3)中当司机开开车:在《幸福工厂》(Satisfactory)中挖矿石:在《瓦尔海姆》(Valheim)中寻找水源:在《无人深空》中(No Man’s Sky)驾驶宇宙飞船射击小行星收集资源:……SIMA全称Scalable Instructable Multiworld Agent,顾名思义可扩展、可指导、多世界。之前,GoogleDeepMind在AI+游戏方面也做过许多工作,比如推出能和人类玩家打PK、会玩《星际争霸II》的AlphaStar系统。而SIMA被DeepMind称作是一个“新的里程碑”,主打从适用单一游戏转向通用多种游戏,且可遵循语言指令。SIMA一公开,网友们也是讨论热烈。让它们替我完成无聊繁琐的任务,这样我就可以直接做有趣的部分,而不必花几个小时培育chocobos获取随机召唤。嗯…《最终幻想》(Final Fantasy)玩家无疑了。专业《模拟山羊》玩家在此刻也懵了:最近这一连串的AI进展也是整的网友们措不及防,直呼“慢一点”:10秒内完成的简单任务接下来再来看一波SIMA的表现。为了让SIMA接触到更多游戏环境,开发团队表示目前已与八家游戏工作室合作,在九款不同的视频游戏上训练和测试了SIMA。当前的SIMA已在600个基本技能上进行了评估。基本操作、交互、使用菜单都会:简单的任务,10秒内可完成。各种场景都能适应:除此外,GoogleDeepMind还发布了一份技术报告,一起来看看里面都有啥。未见过的游戏也会玩SIMA的整体架构是将预训练视觉模型与自监督学习的Transformer相结合。从用户那里接收语言指令,并从环境中获取图像观察结果,然后将它们映射为键盘和鼠标动作。具体架构如下图:开发人员收集了一个既包括精选研究环境又包括商业视频游戏的大型多样化游戏数据集。此外,他们还用Unity创建的一个新环境,名为“the Construction Lab”。在这个环境中,智能体需要使用积木构建雕塑,这考验了它们对物体的操纵能力和对物理世界的理解。数据收集包含多种方法,比如让不同成对的人类玩家的互动,其中一名玩家观察并指导另一名玩家,以此来捕获语言指令;让玩家自由玩游戏,观察他们的操作,并记录下可能导致其游戏行为的指令。通过在不同的游戏世界中学习,SIMA能够将语言与游戏行为相结合。不需要访问游戏源代码,也不需要定制API,仅需要两个输入:屏幕上的图像和用户提供的简单的自然语言指令。然后SIMA就会使用键盘和鼠标输出来控制游戏角色以执行这些指令,这一操作与人类类似,也就意味着SIMA有潜力与任何虚拟环境互动。在评估测试中,研究人员表示SIMA在九个3D游戏集上接受训练,表现显著优于仅在单个游戏上专门训练的智能体。而且SIMA在未训练过的游戏中的表现和专门使用该游戏数据集训练过的智能体表现一样好。也就是说,SIMA在全新环境中具备泛化能力。此外测试结果还显示,SIMA的性能依赖于语言。在一个控制测试中,智能体没有接受任何语言训练或指令,它就会出现无目的的操作,不遵循指令。而且,和人类玩家相比较,SIMA水平还是差一点。 ... PC版: 手机版:

相关推荐

封面图片

谷歌发布通用AI智能体,3D游戏玩法料将变天

谷歌发布通用AI智能体,3D游戏玩法料将变天 谷歌DeepMind推出SIMI(Scalable Instructable Multiworld Agent,顾名思义可扩展、可指导、多世界),打造出首个能在广泛3D虚拟环境和视频游戏中遵循自然语言指令的通用AI智能体,号称可以成为玩家拍档、帮忙干活打杂。比如:在《模拟山羊3》(Goat Simulator 3)中当司机开开车,在《幸福工厂》(Satisfactory)中挖矿石,在《瓦尔海姆》(Valheim)中寻找水源,在《无人深空》中(No Man’s Sky)驾驶宇宙飞船射击小行星收集资源。 标签: #Google #SIMI 频道: @GodlyNews1 投稿: @GodlyNewsBot

封面图片

谷歌公开全新AI系统SIMA 可以听从指示玩游戏

谷歌公开全新AI系统SIMA 可以听从指示玩游戏 自己不想玩游戏玩AI让AI玩游戏?据谷歌开发人员表示SIMA(Scalable Instructable Multiworld Agent)系统将负责接受人类赋予的根据自然语言无法给与决定性答案的目标,使用游戏内内置的规则和操作实施游戏行动。研究者表示目前正在通过《无人深空》、《Teardown》、《Goat Simulator》等多个不同类型的游戏测试SIMA,今后将开发进展实现能够与玩家会话交流共同或游戏的程度,敬请期待。 ... PC版: 手机版:

封面图片

用于实时编码世界的3D游戏引擎

用于实时编码世界的3D游戏引擎 Fluxus 是一个用于 3D 图形、声音和游戏的快速原型制作、游戏和学习环境。使用图形命令扩展Racket语言,可以在它自己的实时编码环境中或从 DrRacket IDE 中使用。 Fluxus 是跨平台的(Linux、Windows、OSX、Android、PS2、Raspberry Pi 和 WebGL),并在GPL许可下发布。

封面图片

Stability AI 发布日语 StableLM 模型

Stability AI 发布日语 StableLM 模型 Stability AI 今天发布了日语 StableLM Alpha,将其语言模型产品扩展至国际市场,这是面向日语使用者的性能最佳的公开语言模型。 新的70亿参数通用语言模型旨在为日本用户提供增强的人工智能文本生成能力。Stability AI 表示,在该公司进行的评估中,日语 StableLM 的表现优于其他四种基准日语模型。 新模型发布了两个版本: 和。 基础模型设计用于使用大规模日语和英语训练数据进行一般文本生成。指令模型使用监督微调技术进行额外调整,以遵循用户提示和说明。 此次发布为日本人工智能开发人员和研究人员提供了适合其语言的新生成模型。这也标志着 Stability AI 首次扩展到 Stable Diffusion 等英语语言模型之外。此举标志着随着全球生成式人工智能应用的增加,未来可能会进入其他国际市场。

封面图片

AI 新知:当GPT-4 遇上开放世界游戏, 智能代理到底有多强?

AI 新知:当GPT-4 遇上开放世界游戏, 智能代理到底有多强? 尽管AI 智能代理在一个开放世界的成为超级玩家的内容不再是新闻了,然而在上周英伟达发布一系列重磅发布中, 这个被称为 Voyager 游戏智能代理,还是表现出非常令人惊叹的自主探索和学习能力。 这种智能代理是如何通过 GPT-4 一步步是实现的? 为了让更多非专业人士,从原理层面感知这类技术(类似 AutoGPT)原理、应用层的可能,我和 Claude 100k 一起为大家尽可能深入浅出的进行解释和案例分析。 ( 对话全部内容, 核心问题只有一个,自主学习、编码、技能树的游戏 AI 是如何工作。 (如果你不熟悉《我的世界》这款游戏的玩家视角,我建议你先在官方网址 ,简单看一下多个GIF 级别的小视频, 有个感性认知。图 1,也可以直接移步官方网址 Voyager 是什么? - 它是第一个玩Minecraft的终身学习的智能代理。Voyager 可以自己写代码、自我迭代、不断完善技能库中,实现可以终身学习的游戏探索过程(见图 2 ) - 它建立在GPT-4之上,并解锁了一个新的范式:「训练」在这个语境下是执行代码;「训练模型」是Voyager迭代组成的技能代码库,而不是浮点矩阵。 - Voyager 正在成为一个经验丰富的探索者,一个超级玩家。在《我的世界》中,它获得了3.3倍的独特物品,旅行了2.3倍的距离,解锁关键技术树里程碑的速度比之前的方法快15.3倍。 - 它是开源的。 Voyager 有 3 个关键组件:(见图3) 1. 结合游戏反馈、执行错误、验证来完善程序的迭代提示机制;(让 GPT-4 写代码 ) 2. 用于存储和检索复杂行为的技能代码库;(任务的自主完善和迭代) 3. 最大化探索的自动课程。 (开放的任务指导体系) 以下是我和Claude 100k的全文提问内容, 你可以作为「深度对话」和 GPT 们交流。 (如果你不是 Poe 的付费用户,也可以用 ChatPDF 之类的代替) Q1:我们讨论一篇重要的AI行业论文,我把正文输入给你, 当你阅读理解完成后, 请回复 OK。(请注意,复制全文有关对话记录省略了 )

封面图片

腾讯自研游戏AI引擎GiiNEX发布 开发效率提升100倍

腾讯自研游戏AI引擎GiiNEX发布 开发效率提升100倍 其AIGC能力包括2D图像、动画、3D城市、剧情、对话、关卡和音乐等多样功能,帮助开发者提升高质量内容的生成效率。该引擎包含前沿算法模型、高效训练平台和在线推理引擎三大核心,支持游戏全生命周期需求,包括研发到运营。基于强化学习、自然语言处理等AI基础研究能力,GiiNEX构建了统一算法底层模型,支持多种游戏类型,如MOBA、FPS和派对游戏等。此外,GiiNEX还提供专为智能体和大模型设计的高性能训练平台,支持万卡规模资源调度,并兼容主流设备的在线推理引擎,实现移动端与云端的混合部署。官方表示,在城市布局环节中,构思并创建一个面积达25平方千米的城市,开发者过去需要至少5天时间,而采用GiiNEX城市布局工具只要25分钟,效率提升100倍。通过GiiNEX,仅需简单绘制城市的主要特征,如水体、主干道和山脉等,调整个别参数,便能快速生成完整的矢量路网布局。GiiNEX利用大模型等生成式AI技术,为玩家提供了一系列游戏内可用的UGC关卡设计工具,并已在游戏《元梦之星》上线。 ... PC版: 手机版:

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人