马斯克证实xAI将自行打造超级计算机训练Grok大语言模型

马斯克证实xAI将自行打造超级计算机训练Grok大语言模型 PANews 7月11日消息,据IT之家报道,马斯克证实其名下人工智能初创企业xAI已结束与甲骨文扩大现有协议、租用英伟达芯片的洽谈。他表示,xAI正打造一台拥有10万块英伟达H100 GPU的超级计算机,预计将在本月晚些时候交付并开始训练。他指出,“这将成为全球范围内功能最强大的训练集群,并且领先优势巨大”,“我们的核心竞争力在于比任何其他的人工智能公司都更快,这是缩小差距的唯一途径”。 在此之前,xAI已经从甲骨文租用了2.4万块的H100芯片(的算力),并用它们训练出了Grok 2。他表示Grok 2 目前正处于最终的打磨阶段,只需要进行些许微调和Bug修复就可以发布,预计最快下个月发布。今年5月有报道称,两家公司接近达成扩大合作关系的协议,xAI将斥资约100亿美元向甲骨文租用云服务器、为期数年。

相关推荐

封面图片

马斯克证实 xAI 将自行打造超级计算机训练 Grok 大语言模型

马斯克证实 xAI 将自行打造超级计算机训练 Grok 大语言模型 马斯克证实其名下人工智能初创企业 xAI 已结束与甲骨文扩大现有协议、租用英伟达芯片的洽谈。他表示,xAI 正打造一台拥有 10 万块英伟达 H100 GPU 的超级计算机,预计将在本月晚些时候交付并开始训练。 他指出,“这将成为全球范围内功能最强大的训练集群,并且领先优势巨大”,“我们的核心竞争力在于比任何其他的人工智能公司都更快,这是缩小差距的唯一途径”。

封面图片

马斯克旗下xAI公司结束谈判 甲骨文100亿美元交易泡汤

马斯克旗下xAI公司结束谈判 甲骨文100亿美元交易泡汤 马斯克周二在其社交网络 X 上发帖称,他的公司 xAI 决定建立一个内部训练 AI 模型的系统,因为“我们的基本竞争力取决于比任何其他 AI 公司都更快。据多位参与谈判的人士透露,xAI和甲骨文已经结束了扩大现有协议的谈判,谈判因时间表和电力供应问题分歧而破裂。根据现有协议,xAI一直从甲骨文租用英伟达的AI芯片。xAI已经签订了一项合作,在甲骨文云服务平台Gen2 Cloud上训练AI模型。现在,xAI正购买芯片在田纳西州孟菲斯市自主建立一座数据中心。xAI原本正与甲骨文磋商一项从甲骨文租用英伟达处理器的多年协议,目的是把这些处理器用于计划中的超级计算机,但谈判因一些问题而受阻,例如马斯克要求建造一台速度更快的超级计算机,这让甲骨文感觉难以做到。而且,甲骨文还担心xAI首选的地点电力供应不足。甲骨文与xAI所讨论的具体处理能力已外包给另一家客户。xAI已经从甲骨文租用了大约1.6万颗英伟达芯片。马斯克计划构建一个使用10万颗英伟达GPU驱动的超级计算机,用于训练Grok 3.0大模型。但是,甲骨文已经与微软签署了一项协议,为OpenAI提供由英伟达芯片驱动的服务器,这笔交易涉及10万颗即将推出的GB200芯片。马斯克在X上发文回应称,xAI正在使用英伟达的H100图形处理器自行构建一个系统,从而“以最快的时间完成”。“xAI从甲骨文订购了2.4万个H100处理器,用于训练了Grok 2。Grok 2正在进行微调和修复漏洞阶段,预计下个月可以发布。同时,xAI正在自行建设一个使用10万颗H100处理器的系统,以便争取以最快时间完成,目标是本月晚些时候开始训练,这将成为世界上最强大的训练集群,性能大幅领先。”分析师 Anurag Rana 写道,马斯克决定在内部建立 AI 训练基础设施,这凸显了云提供商尽管拥有资金,但仍面临扩张挑战。“我们认为这些问题不仅限于甲骨文,也可能困扰微软和 AWS,不仅是因为专用芯片短缺,还因为电力短缺。” ... PC版: 手机版:

封面图片

马斯克的人工智能创企 xAI 终止与甲骨文扩大芯片租用协议的洽谈

马斯克的人工智能创企 xAI 终止与甲骨文扩大芯片租用协议的洽谈 马斯克7月9日证实,人工智能创企xAI已结束与甲骨文扩大现有协议、租用英伟达芯片的洽谈。马斯克表示,xAI正建造一台拥有10万个英伟达图形处理单元的超级计算机,这些芯片用于训练和操作生成式AI程序,“我们的根本竞争力有赖于比其他任何人工智能公司更快”。马斯克另外透露,xAI的Grok 2模型在来自甲骨文的2.4万个英伟达H100芯片上进行训练,“可能准备下月发布”。 甲骨文去年9月曾表示,该公司已达成协议,向xAI提供云基础设施以训练AI模型。甲骨文当时未透露合同价值和期限。今年5月有媒体报道称,两家公司接近达成扩大合作关系的协议,xAI将斥资约100亿美元向甲骨文租用云服务器、为期数年。 、、

封面图片

戴尔、超微为 xAI 超级计算机提供服务器机架

戴尔、超微为 xAI 超级计算机提供服务器机架 总部位于旧金山的超微证实了与 xAI 的合作,该公司以与 Nvidia 等芯片公司关系密切及其液冷技术而闻名。戴尔首席执行官迈克尔·戴尔也在 X 上的另一篇帖子中表示,该公司正在与人工智能巨头 Nvidia 合作建立一个“AI 工厂”,为 xAI 的下一个版本的聊天机器人 Grok 提供动力。据5 月份报道,马斯克告诉投资者,他的人工智能初创公司 xAI 计划建造一台超级计算机,为其下一代人工智能聊天机器人 Grok 提供动力。训练 xAI 的 Grok 等人工智能模型需要数万块芯片,而这些芯片供不应求。今年早些时候,马斯克表示,训练 Grok 2 模型需要大约 20000 个 Nvidia H100 图形处理单元 (GPU),并补充说,Grok 3 模型及以后的模型将需要 100000 个 Nvidia H100 芯片。据《Information》报道,马斯克表示,他希望在 2025 年秋季之前让这台计划中的超级计算机投入运行。马斯克去年创立了 xAI,作为微软支持的 OpenAI 和 Alphabet 旗下谷歌的挑战者。马斯克也是 OpenAI 的联合创始人。 ... PC版: 手机版:

封面图片

xAI将建造一台非常强大的超级计算机来处理下一版Grok

xAI将建造一台非常强大的超级计算机来处理下一版Grok 这位亿万富翁今年早些时候表示,Grok 2 需要 2 万个英伟达 H100 GPU 才能完成训练,而即将推出的 Grok 模型将需要超过 10 万个 H100 GPU。通过建造这台被称为"计算机千兆工厂"的超级计算机(以特斯拉千兆工厂命名),xAI或许能够开发出更先进的语言模型。随着OpenAI 的 ChatGPT在人工智能领域占据主导地位,你很可能还没有尝试过或听说过 Grok。它可以在上使用,但需要用户付费订阅。与其他模式相比,Grok 的一大优势是它可以直接访问 X 上的所有帖子,马斯克一直说 X 是新闻媒体的替代品。马斯克曾经参与过 OpenAI 的工作,直到他与公司负责人山姆-阿尔特曼(Sam Altman)在公司发展方向上产生分歧。与 OpenAI 对 ChatGPT 的细节守口如瓶不同,xAI 最近开源了 Grok-1 的权重和架构。如果 xAI 真的实施这些计划,那么NVIDIA 将成为主要受益者,因为它对 H100 GPU 的需求将会增加。此举对整个领域也有好处,因为它将迫使其他公司(如 OpenAI 和Google)进一步创新其模式,以保持领先地位。不幸的是,所有这些额外的计算能力都需要以大量的某种能源供电,因此,希望马斯克能找到一种使用可再生能源的方法,并将用水量控制在最低水平。 ... PC版: 手机版:

封面图片

马斯克:训练Grok 3用了10万块英伟达H100 年底上线 会很特别

马斯克:训练Grok 3用了10万块英伟达H100 年底上线 会很特别 这里所说的H100是英伟达开发的图形处理单元,也称为Hopper,是专门用于处理大语言模型(LLMs)数据的AI芯片。随着科技公司竞相开发更智能的AI产品,这些芯片成了硅谷的热门商品。每块英伟达H100人工智能芯片的价格估计在3万美元左右,也有人估计价格高达4万美元,如果批量购买的话可能会有折扣。通过简单计算,单单训练Grok 3就用了价值30亿至40亿美元的人工智能芯片,目前不确定这些芯片是否是马斯克公司直接购买的,此前报道称,马斯克旗下的xAI公司正在与甲骨文谈判,计划在未来几年内花费100亿美元租用云服务器。近年来,马斯克的公司已直接购买了大量的H100芯片。据报道,马斯克曾将原本供特斯拉使用的价值5亿美元的H100芯片转给了X公司。相较于Grok 2,使用10万块H100训练Grok 3无疑是一个巨大的提升。今年4月,马斯克在接受挪威主权基金负责人尼科莱·坦根(Nicolai Tangen)的采访时表示,训练Grok 2需要大约2万块H100。目前,xAI已发布了Grok-1和Grok-1.5版本,最新版本仅对X平台上的早期测试者和现有用户开放。马斯克在周一的帖子中透露,Grok 2计划于今年8月推出,并暗示Grok 3将于年底发布。xAI没有回应置评请求。10万块H100芯片听起来很多,但其他科技巨头,如Meta,也在大量购买GPU芯片。Meta首席执行官马克·扎克伯格(Mark Zuckerberg)今年1月曾表示,到2024年底,Meta将购买约35万块英伟达H100芯片,并表示包括其他类型的GPU在内,Meta将拥有约60万块芯片。如果是这样的话,Meta将为构建自家人工智能能力花掉大约180亿美元。这些芯片的积累也导致了过去一年中顶尖AI人才的招聘竞争变得异常激烈。AI初创公司Perplexity的创始人兼首席执行官阿拉文德·斯里尼瓦斯(Aravind Srinivas)谈到了他试图从Meta挖角一位资深研究人员的经历,但对方因扎克伯格拥有大量AI芯片而拒绝了他的邀请。“我试图聘请一位非常资深的Meta研究员,他们的回答是:‘等你有了1万块H100 GPU再来找我。’”斯里尼瓦斯说。 ... PC版: 手机版:

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人