底部：技能检索。当面对新的自动课程提出的任务，Voyager 会执行查询以确定前5 名相关技能。复杂的技能可以通过编写更简单的程

底部：技能检索。当面对新的自动课程提出的任务，Voyager 会执行查询以确定前5 名相关技能。复杂的技能可以通过编写更简单的程序来合成，这加速了迭代。 请从继续描述一个「构建房屋」例子，来说明这个技能库完善的过程吧。 Q10：解释的很好， 自动课程会根据VOYAGER当前的状态和位置，借助 GPT-4 不断适应环境。 这「看上去」确实有一些生物意义的智能在里面了呢。 那么，我们再来讨论第三个重要的组件：构建技能库。请介绍下Voyager 通过将成功的程序存储在向量 DB 中来逐步构建技能库？比实现由简单技能构建复杂的技能的累进过程？（ 图 8） Q11：论文中提到， 顶部：添加新技能。每个技能都通过嵌入其描述来索引，可以在将来的类似情况下检索。底部：技能检索。当面对新的自动课程提出的任务，Voyager 会执行查询以确定前 5 名相关技能。复杂的技能可以通过编写更简单的程序来合成，这加速了迭代。 请从继续描述一个「构建房屋」例子，来说明这个技能库完善的过程吧。 Q12： 这里有一个小问题， GPT-4 目前没有提供「视觉」能力， 那么， 构建房屋这种复杂的技能和任务， 是如何被代码实现的呢？ Q13：那么，请总结以上我们讨论，如何理解Voyaer 这种终身学习 AI 代理的主要能力；并尝试用一段话来描述这种技术的开创性价值和潜在应用场景吧。 谢谢你的 Copliot～ 以上全部对话内容一次放出， 可在 Poe 网址上观赏 。Enjoy～

AI 新知：当GPT-4 遇上开放世界游戏， 智能代理到底有多强？

AI 新知：当GPT-4 遇上开放世界游戏， 智能代理到底有多强？ 尽管AI 智能代理在一个开放世界的成为超级玩家的内容不再是新闻了，然而在上周英伟达发布一系列重磅发布中， 这个被称为 Voyager 游戏智能代理，还是表现出非常令人惊叹的自主探索和学习能力。 这种智能代理是如何通过 GPT-4 一步步是实现的？ 为了让更多非专业人士，从原理层面感知这类技术（类似 AutoGPT）原理、应用层的可能，我和 Claude 100k 一起为大家尽可能深入浅出的进行解释和案例分析。 （ 对话全部内容， 核心问题只有一个，自主学习、编码、技能树的游戏 AI 是如何工作。 （如果你不熟悉《我的世界》这款游戏的玩家视角，我建议你先在官方网址 ，简单看一下多个GIF 级别的小视频， 有个感性认知。图 1，也可以直接移步官方网址 Voyager 是什么？ - 它是第一个玩Minecraft的终身学习的智能代理。Voyager 可以自己写代码、自我迭代、不断完善技能库中，实现可以终身学习的游戏探索过程（见图 2 ） - 它建立在GPT-4之上，并解锁了一个新的范式：「训练」在这个语境下是执行代码；「训练模型」是Voyager迭代组成的技能代码库，而不是浮点矩阵。 - Voyager 正在成为一个经验丰富的探索者，一个超级玩家。在《我的世界》中，它获得了3.3倍的独特物品，旅行了2.3倍的距离，解锁关键技术树里程碑的速度比之前的方法快15.3倍。 - 它是开源的。 Voyager 有 3 个关键组件：（见图3） 1. 结合游戏反馈、执行错误、验证来完善程序的迭代提示机制；（让 GPT-4 写代码 ） 2. 用于存储和检索复杂行为的技能代码库；（任务的自主完善和迭代） 3. 最大化探索的自动课程。 （开放的任务指导体系） 以下是我和Claude 100k的全文提问内容， 你可以作为「深度对话」和 GPT 们交流。 （如果你不是 Poe 的付费用户，也可以用 ChatPDF 之类的代替） Q1：我们讨论一篇重要的AI行业论文，我把正文输入给你， 当你阅读理解完成后， 请回复 OK。（请注意，复制全文有关对话记录省略了 ）

AI 新知：为什么基础代理将会是下一个革命性技术？

AI 新知：为什么基础代理将会是下一个革命性技术？ 来自英伟达高级研究员 & AI Agents负责人Jim Fan 近期释放的TED 演讲，《The next grand challenge for AI》提出了「基础代理」将在虚拟世界和物理世界中无缝运行。他解释了这项技术将如何从根本上改变我们的生活渗透到从视频游戏、元宇宙到无人机和仿人机器人的方方面面并探讨了这一模型如何掌握跨越这些不同现实的技能。 他提出「基础代理」（Foundation Agent）的秘诀：一个单一的模型，可以学习如何在不同的世界中行动。 （如果你之前不太熟悉AI agents相关基础知识， 可以结合文本内容补充相关知识点，Enjoy） 「基础代理」中的智能体， Voyager 是什么？？ - 它是一个在 Minecraft开放世界中无限学习的智能体。Voyager 可以自己写代码、自我迭代、不断完善技能库中，实现无限学习（Longlife learning）的探索过程。 - 这里核心只有一个，就是无限迭代。 它不断扩充自己的技能图书馆， 无论是在游戏中制作工具，并升级科技树（例如，从Wooden Tool 到Iron Tool）， 全部是自主迭代、自主验证的。 它不仅是自动化，它是通过一套机制自主学习 [1]。 - 它建立在GPT-4之上，并解锁了一个新的范式：「训练」在这个语境下是执行代码；「训练模型」是Voyager迭代组成的技能代码库，而不是浮点矩阵。 - Voyager 作为一个超级玩家，在《我的世界》中，它获得了3.3倍的独特物品，旅行了2.3倍的距离，解锁关键技术树里程碑的速度比之前的方法快15.3倍。它还开源的。 [1] 为什么这个「基础代理」具有非凡意义？ - LLM 适用于大量文本，而基础代理可以跨越很多很多现实。 基础代理 已经在虚拟世界被验证强大的学习自主性。 - 其次，Jim Fan 认为它具有跨越Reality的拓展性。 开放游戏世界Minecraft 只是作为一个模拟现实（simulated realities）和实验基地，他们还在其他仿真环境进行训练和探索得到惊人进展。[2] - 如果它能够掌握 10,000 种不同的模拟现实，那么它就能很好地推广到我们的物理世界，而物理世界只是第 10,001 个现实。 - 换句话说，它正在加速应用于物理世界，特别是机器人技术。 参考Jim Fan的PPT 。 [3] Hans 注释： [1] 这套自主学习和迭代的机制，有三个核心组件： a）结合游戏反馈、执行错误、自我验证来完善程序的迭代提示机制；（让 GPT-4 写代码 ） b）用于存储和检索复杂行为的技能代码库；（任务的完善和迭代，成为了技能） c）最大化探索的自动课程。Hans 在去年相关论文讨论的《当GPT-4 遇上开放世界》中，有更详细的解读。 [2] 英伟达 Isaac Gym 是一个功能强大的端到端 GPU 加速仿真环境，用于强化学习，可用于训练机器人和模型。它是英伟达 Omniverse 平台的一部分，为机器人和计算机视觉算法提供基于物理的高保真模拟。 [3] TED 视频中Jim Fan的PPT ： Invalid media:

Q-Transformer ：DeepMind开发的一种新的强化学习方法，它的目标是从大量的数据中学习如何完成多种任务。（工作原

Q-Transformer ：DeepMind开发的一种新的强化学习方法，它的目标是从大量的数据中学习如何完成多种任务。（工作原理见评） 该方法可以处理大量的数据，并且可以从人类的示范中学习。这意味着，如果有一个人类专家展示如何完成任务，Q-Transformer可以从这些示范中学习。 Q-Transformer 可以应用于各种需要决策学习的领域，如机器人控制、游戏策略优化、金融决策等。 |

卡库远古封印大小：14GB

卡库远古封印 大小：14GB 本贴资源提供仅需浏览器即可免费不限速下载的地址，无需百度、夸克等限速网盘！ 如何下载资源？请看置顶消息。（直接发下载链接，会因链接太多而降低频道评级，所以通过置顶统一说明，望各位理解！） 介绍：《卡库：远古封印》（Kaku: Ancient Seal）是一款由Kaku Games开发的角色扮演游戏。游戏融合了动作、冒险和解谜元素，设定在一个神秘的幻想世界中，玩家将探索一个充满古老秘密和魔法的广阔世界。 游戏特点： 1. 幻想世界：游戏的背景设定在一个充满古代魔法和神秘生物的幻想世界中。玩家将探索各种环境，包括古老的遗迹、繁茂的森林和神秘的地下洞穴。 2. 角色扮演：玩家可以扮演不同的角色，每个角色都有独特的技能和能力。游戏提供了角色成长系统，玩家可以通过战斗和任务来提升角色的能力。 3. 战斗与技能：战斗系统结合了实时动作和策略元素，玩家需要利用角色的技能和装备来对抗敌人。游戏中有丰富的武器、魔法和技能选择，允许玩家根据自己的喜好定制战斗风格。 4. 解谜与探险：游戏中包含了大量的解谜元素，玩家需要解决各种难题和机关才能继续前进。探险过程中，玩家可以发现隐藏的秘密和珍贵的宝藏。 5. 任务系统：除了主线任务，游戏还提供了丰富的支线任务和挑战。玩家可以通过完成这些任务来获得奖励和提升角色。 6. 视觉与音效：游戏具有精美的视觉效果和细腻的环境设计，营造出一个沉浸式的幻想世界。音效和音乐也为游戏增添了不少氛围。 #PC #开放世界 #角色扮演

《Beyond the Basic Stuff with Python》

《Beyond the Basic Stuff with Python》 超越 Python 的基本内容：编写简洁代码的最佳实践 内容包含编码风格、常见错误、Cookiecutter 模板工具、函数式编程技术、Big-O 算法分析等等 ​​​ 你会学到： 编码风格，以及如何使用 Python 的 Black 自动格式化工具来获得更清晰的代码 错误的常见来源，以及如何使用静态分析器检测它们 如何使用 Cookiecutter 模板工具构建代码项目中的文件 函数式编程技术，如 lambda 和高阶函数 如何使用 Python 的内置 timeit 和 cProfile 模块分析代码的速度 Big-O 算法分析背后的计算机科学 如何让你的评论和文档字符串提供信息，以及多久写一次 如何在面向对象编程中创建类，以及为什么使用它们来组织代码 在本书的末尾，你将阅读两个经典命令行游戏的详细源代码分解，汉诺塔（逻辑谜题）和四人行（两人游戏） )，以及他们的代码如何遵循本书最佳实践的细目。你将通过自己实施该程序来测试你的技能。 当然，没有任何一本书可以使您成为专业的软件开发人员。但是，《Beyond the Basic Stuff with Python》会让你在这条道路上走得更远，并在学习编写易于调试且完美 Pythonic 的可读代码的过程中使你成为更好的程序员。 | #电子书 #Python