英伟达进军机器人领域 发布世界首款人形通用基础模型

英伟达进军机器人领域 发布世界首款人形机器人通用基础模型 英伟达正通过推出名为Project GR00T的新型人形机器人基础模型，进一步进军机器人领域。基础模型是一种人工智能系统，它使用海量数据进行训练，能够用于各种各样的任务，从生成句子到视频、图像等等。据Nvidia，Project GR00T将帮助人形机器人“理解自然语言并通过观察人类行为来模仿动作 - 快速学习协调性、灵活性和其他技能，以便导航、适应并与现实世界互动。除了Project GR00T，英伟达还发布了其Isaac机器人平台的一部分Isaac Manipulator和Isaac Perceptor。Isaac Manipulator是一系列专为机械臂设计的基础模型，而Issac Perceptor旨在为设计用于制造和履行任务的机器人提供“多摄像头、3D环绕视觉能力”。此外，这家图形巨头还推出了用于人形机器人的Jetson Thor计算平台。该平台由英伟达的Thor系统芯片提供动力，将成为人形机器人的大脑。英伟达在声明中表示：“Jetson Thor被打造为一个全新的计算平台，能够执行复杂的任务并安全自然地与人和机器互动。它拥有模块化架构，在性能、功耗和尺寸方面都进行了优化。”GR00T正好和《银河护卫队》电影中的树人格鲁特（Groot）同名该公司表示，他们已经与一些机器人领域的大牌公司合作，包括以Spot机器人闻名的波士顿动力 (Boston Dynamics)、1X Technologies、Agility Robotics、Apptronik和Figure AI。其中，Figure AI近期备受关注，上周发布了一段视频，展示了人形机器人根据提示进行类人对话并完成一系列任务，例如拾取盘子并将其放入沥水架。虽然这看起来似乎没什么特别，但让机器人识别每个物品并精确移动它们的技术非常复杂。今年2月，英伟达与微软、OpenAI、Jeff Bezos、Parkway Capital、Intel Capital 等公司一起参加了Figure AI的B轮融资，使该公司估值达到26亿美元。人形机器人有望让人们完成危险或重复性的工作，但和其他AI技术一样，它们也让人们担心会取代人类的工作岗位。当然，不要指望人形机器人很快就能在街上闲逛。 ... PC版： 手机版：

英伟达发布新的机器人制造平台 添加生成式AI功能

英伟达发布新的机器人制造平台 添加生成式AI功能 生成式AI的加入将使人形机器人根据语言、视频、“人类示范”和过去的经验相结合的输入采取行动。这个被称为“GR00T项目”的生成式AI组件将添加到英伟达现有的机器人硬件和软件平台上。英伟达Omniverse和仿真技术副总裁Rev Lebaredian在新闻发布会上说：“这些更智能、更快、更好的机器人将被部署在全球的重工业中。我们正在与全球整个机器人和仿真生态系统合作，以加速开发和采用。”新的生成式AI软件背后的强大计算机被称为“杰森·索尔”（Jetson Thor），基于英伟达的一款人工智能芯片和其他硬件。该公司表示，这台计算机将为机器人提供足够的计算能力，以执行复杂的任务，并与人和机器互动。英伟达表示，这套软件工具被称为“艾萨克”（Isaac）平台，新的GR00T生成式AI功能被设计用于“任何环境下的任何机器人化身”。这些工具包括训练软件随着时间的推移做出更好决策的能力，这一过程被称为强化学习。英伟达还表示，将发布预先训练过的机器人模型和其他软件，以改进机械臂功能和多摄像头感应能力。 ... PC版： 手机版：

机器人基础模型相关资源 |

机器人基础模型相关资源 | 这是调查论文“机器人基础模型：应用、挑战和未来”的合作伙伴存储库。作者希望这个存储库可以为希望阅读相关论文并实现相关方法的机器人专家提供快速参考。 本自述文件的组织遵循论文中的图 （如上所示），因此分为已应用于机器人技术的基础模型和以某种方式与机器人技术相关的模型。

机器人“疯狂的一年”拉开序幕：基础模型、通用具身智能指日可待？

机器人“疯狂的一年”拉开序幕：机器人基础模型、通用具身智能指日可待？ 在这次采访中，被问到“眼下正在发生哪些你认为将改变一些的事情”时，这位“地球上最重要股票”的掌门人表示，“有几件事。其中之一没有真正的名字，但它是我们在基础机器人领域做的一些工作。如果你可以生成文本、生成图像，你也可以生成运动吗？答案可能是可以。那么，如果你可以生成动作，你就可以理解意图并生成通用版本。因此，人形机器人技术指日可待。”在采访发布的同日，英伟达高级研究科学家Jim Fan宣布，将与Yuke Zhu携手在英伟达组建一个研究小组GEAR，全称Generalist Embodied Agent Research，意为“通用具身智能体研究”。他认为，未来每一台移动的机器都将是自主的，机器人与模拟智能体将和iPhone一样无处不在。“我们正在打造基础智能体：一个具备通用能力的AI，其能在虚拟与现实的多个世界中学习如何熟练行动。2024年将是机器人之年、游戏AI之年、模拟之年。”此外，英伟达、贝索斯等将投资人形机器人公司Figure AI，以期为AI寻找新应用。Figure AI此前曾得到OpenAI和微软支持，其将在一轮融资中筹集约6.75亿美元，交易前估值约为20亿美元。贝索斯通过旗下Explore Investments LLC承诺投资1亿美元，微软将投资9500万美元，英伟达和一个亚马逊附属的基金将各提供5000万美元。Figure AI年初凭借一条人形机器人煮咖啡的视频火爆全网，该机器人使用端到端的AI系统，仅通过观察人类煮咖啡，即可在10小时内完成训练。之后，该公司宣布，旗下机器人入驻宝马汽车工厂。英伟达这边动作不断，马斯克则在当地时间2月24日分享了特斯拉人形机器人Optimus（擎天柱）的最新视频。视频中，Optimus的步态更加稳健，行走体态也更接近人类；改变行进方向时极为顺滑，没有僵硬的机械感，且转向的同时并未停止前进。Optimus机器人工程师Milan Kovac介绍，这是Optimus有史以来最快的步态，速度约为 0.6 米/秒，与12月发布的视频相比，速度提高了30%。“我们改进了前庭系统、脚部轨迹和地面接触逻辑；升级了运动规划器，并缩短了整个机器人的环路延迟。Optimus整体行走稳定性和自信程度上都有所提升，即使在转弯时也表现优异。我们还增加了轻微的躯干和手臂摇摆。”机器人+AI“疯狂的一年” 券商建议关注四条主线“未来几周将会有3-4条重大新闻发布，这些消息将震撼机器人+人工智能领域。调整你的时间表，这将是疯狂的2024年。”谷歌DeepMind研究科学家Ted Xiao在当地时间2月22日如此预告。机器人板块春节后强势反弹，中信证券研报指出，主因为特斯拉人形机器人产业链进度预期改善、AI巨头点燃机器人技术创新之火、政策端及厂商端持续利好更新，此外流动性问题缓解也为板块反弹提供了条件。产业发展进度在AI加持下将大大加快。板块反弹处于初始阶段，2024年将是人形机器人快速发展的一年。在产业链进度预期改善、巨头技术突破、新品发布和迭代、政策落地等因素的催化下，分析师看好机器人产业发展和板块回暖，建议关注以下四条主线：1）人形机器人核心高确定性公司；2）与英伟达合作的机器人标的；3）业绩预期较好，具备估值安全垫的标的；4）超跌及强概念股。 ... PC版： 手机版：

英伟达 ChatRTX 聊天机器人现在支持 Google Gemma 模型、语音查询等功能

英伟达 ChatRTX 聊天机器人现在支持 Google Gemma 模型、语音查询等功能 英伟达公司正在更新其实验性 ChatRTX 聊天机器人，为 RTX GPU 用户提供更多人工智能模型。该聊天机器人在 Windows PC 上本地运行，已经可以使用 Mistral 或 Llama 2 来查询你输入的个人文档，但现在支持的人工智能模型列表正在不断扩大，包括 Google 的 Gemma、ChatGLM3 ，甚至还有 OpenAI 的 CLIP 模型以便更轻松地搜索您的照片。

机器人时代已来 黄仁勋指向AI下一波浪潮：物理AI

机器人时代已来 黄仁勋指向AI下一波浪潮：物理AI 他着重强调了机器人和AI在未来发展中的重要性“AI的新一波浪潮是物理AI。AI能够理解物理定律，并与人类并肩作战……机器人和物理AI正在成为现实，而不仅是出现在科幻小说中，这真的很让人兴奋。”什么是“物理AI”？ 物理AI英文为Physical AI，也称“实体AI”。瑞士联邦材料科学与技术实验室Aslan Miriyev和伦敦帝国理工学院Mirko Kovač之前在《Nature MachineIntelligence》发表的一篇文章中，曾如此定义“物理AI”：物理AI是指能够执行通常与智能生物体相关的任务的实体系统，可以实现机体、控制、形态、动作执行和感知的协同进化。在这次演讲中，黄仁勋表示，如今大多数AI并不理解物理定律，不以物质世界为基础。而生成图像、视频、3D图形和许多物理现象，需要基于物理并理解物理定律的AI。“为我们工作的AI，必须理解世界模型，才能理解如何解释世界、如何感知世界。”世界各地的研究人员和公司正在开发由物理AI驱动的机器人，这些AI模型能够理解指令，并在现实世界中自主执行复杂任务。机器人时代已经到来机器人是一个颇为广泛的概念。黄仁勋表示，当他提到“机器人”时，通常大家会想到人形机器人，“但这并不完全正确。一切都将是机器人。”机器人将遍布所有工厂，工厂将实现对机器人的统筹，而这些机器人将制造新的机器人产品。在黄仁勋的构想中，下一个由机器人工厂内的机器人制造的高产量机器人产品可能是人形机器人，最容易适应世界的机器人也是人形机器人。“机器人时代已经到来，AI的下一波浪潮已经到来，”站在各式各样的机器人投影屏幕前，黄仁勋张开双臂，宣告全新时代的揭幕，“由物理AI驱动的机器人技术将彻底改变行业。这不是未来，这正在发生。”在英伟达的产品中，有多项内容与机器人有关，包括用于模拟应用的NVIDIA Omniverse平台、Project GR00T人形机器人通用基础模型、Jetson Thor机器人计算机、NVIDIA Isaac平台等，比亚迪电子、西门子、泰瑞达等公司也正在将英伟达自主机器人技术集成到自家工厂中。英伟达内部也已组建研究小组GEAR，全称Generalist Embodied Agent Research，意为“通用具身智能体研究”。该小组领头人之一、英伟达高级研究科学家Jim Fan彼时也给出了与黄仁勋相似的说法：未来每一台移动的机器都将是自主的，机器人与模拟智能体将和iPhone一样无处不在。“我们正在打造基础智能体：一个具备通用能力的AI，其能在虚拟与现实的多个世界中学习如何熟练行动。2024年将是机器人之年、游戏AI之年、模拟之年。”值得一提的是，随着AI的这一把火从聊天机器人烧向人形机器人，加码投资的自然也不止英伟达一家巨头。上周OpenAI被曝已重启此前被放弃的机器人团队，一位接近OpenAI的知情人士表示，这个新组建的机器人团队已经初步形成，并已经运作了大约两个月的时间。OpenAI副总裁、前机器人团队成员Peter Welinder表示，“我们始终计划重返机器人领域，与Figure AI的合作为我们指明了一条道路，即探索在高性能多模态模型驱动下，人形机器人能够取得的卓越成就。” ... PC版： 手机版：