澎湃新闻-首页头条OpenAI首席科学家:超级智能是人类面临的终极挑战#澎湃##资讯

None

相关推荐

封面图片

澎湃新闻-首页头条OpenAI首席科学家:不开源是出于“竞争”而非安全考虑#澎湃##资讯

封面图片

OpenAI首席科学家Ilya离开OpenAI了吗?

OpenAI首席科学家Ilya离开OpenAI了吗?OpenAI联合创始人兼总裁格雷格·布罗克曼(GregBrockman)、CTO米拉·穆拉蒂(MiraMurati)等人,也在积极为Sora宣传。但伊尔亚的最后一条推文,停留在了2023年12月15日。OpenAI在其官网上的Sora的文章后面留下了团队成员的名字。在一串致谢名单中,我们看到了萨姆·奥尔特曼、格雷格·布罗克曼、米拉·穆拉蒂等人的名字,但唯独没有出现伊尔亚·苏茨克维。这不禁让人怀疑,伊尔亚究竟是在埋头研究GPT-5,还是已经离开了OpenAI?值得一提的是,OpenAI创始成员之一、AI技术研究员安德烈·卡帕蒂(AndrejKarpathy)在Sora发布前夕离职。有网友大胆猜想:“如果Andrej和Ilya创办一家真正开放的人工智能公司怎么办?”1.“我们终于知道伊尔亚看到什么了”今天,OpenAI最新发布的Sora模型再次让人们感受到了人工智能的强大,强大到令人害怕。Sora不仅仅是一个视频生成模型,它涌现出了对物理世界的理解能力(尽管还存在局限),OpenAI直接将其定义为“世界模拟器”(worldsimulators)——它打开了一条通往模拟物理世界的有效路径。不少人感慨,“现实不存在了”,“物理学不存在了”。人们似乎在这一刻终于理解了伊尔亚为什么一直执着于人工智能的安全性研究。强大的AI模型对世界带来的风险并非遥不可及。有网友表示:“现在,我们知道伊尔亚看到什么了。”埃隆·马斯克则在贴子里留下了一个笑哭的表情。去年,随着GPT-4以及后续一系列更强大的大语言模型的更新,以伊尔亚为代表的OpenAI成员越来越多地考虑AI的可控性问题。为此,OpenAI在2023年7月5日宣布成立一个新的团队“超级对齐”(Superalignment),来研究引导和控制比人类聪明得多的AI系统。这一项目由伊尔亚与同事简·莱克(JanLeike)共同领导,并将OpenAI20%的算力专门用于该项目的研究。一般认为,去年11月闹得沸沸扬扬的OpenAI“宫斗事件”的导火索,就是伊尔亚对于AI的发展理念与萨姆产生了分歧,伊尔亚越来越担忧OpenAI的技术可能造成极度危险的局面,他觉得萨姆对待AI应该更加谨慎。显然,萨姆并没有停下来。在硅谷,对于AI的不同态度把人群分成了保守派与激进派。保守派也被称为EA(EffectiveAltruism,有效利他主义),代表人物是“人工智能教父”杰弗里·辛顿(GeoffreyHinton),伊尔亚就是他的学生。激进派被称为“e/acc(有效加速主义)”,很多知名的科技大佬、AI从业者都是e/acc主义的信徒。萨姆并未公开表达过自己的立场,但考虑到他带领下的OpenAI一系列激进的产品发布节奏,事实上他已经成为e/acc的代言人。伊尔亚联合董事会成员罢免了萨姆。但在大股东微软的斡旋与OpenAI全体员工请辞的压力下,伊尔亚最终妥协让步,萨姆在几天后重新回到了OpenAI并掌权,并重组了董事会。宫斗事件结束后,伊尔亚并没有立即离开OpenAI,萨姆希望继续他们之间的工作关系,并正在讨论他如何继续在OpenAI的工作。萨姆表达了对伊尔亚的谢意:“我尊重并热爱着伊尔亚,我认为他是这个领域的指路明灯,也是人类的瑰宝。我对他的恶意为零。”但去年外媒一篇报道曾指出,伊尔亚似乎处于一种“迷茫”的状态,在OpenAI变得“隐形”。自萨姆回归以来,伊尔亚就没有出现在OpenAI旧金山的办公室内。马斯克也向伊尔亚抛出了橄榄枝,他表示伊尔亚应该加入特斯拉或他的AI公司xAI。伊尔亚对于人工智能安全的工作还在继续。12月14日,OpenAI发布了超级对齐项目的最新研究论文:使用GPT-2级别的小模型来监督GPT-4级别的大模型,并获得接近GPT-3.5级别的性能。同时,OpenAI宣布与EricSchmidt合作,启动了一项1000万美元的资助计划支持技术研究,以确保超人类人工智能系统的一致性和安全性。作为该论文核心作者之一的伊尔亚,也在X上转发了相关内容。但这是宫斗事件至今,伊尔亚在X上转发的关于OpenAI进展的唯一内容。我们暂时无法得知伊尔亚是否已经离开了OpenAI,但他对于Sora的沉默态度似乎并不寻常。伊尔亚在签名上写着:“朝着拥抱人性多样化的通用人工智能发展。”2.人才是OpenAI的核心竞争力虽然伊尔亚并不在Sora的研究团队中,但Sora仍然表现出了压倒性的性能优势,可见人才密度是OpenAI领先的重要因素。Sora团队整体非常年轻。核心成员有三位,分别是研究负责人BillPeebles(比尔·皮布尔斯)与TimBrooks(蒂姆·布鲁克斯)与系统主管ConnorHolmes。ConnerHolmes曾是微软研究员,在微软工作时以外援形式参与了DALL·E3的推理优化工作,后来跳槽加入OpenAI。BillPeebles本科就读于MIT,主修计算机科学,参加了GAN和text2video的研究,还在英伟达深度学习与自动驾驶团队实习,研究计算机视觉。毕业后正式开始读博之前,他还参加了Adobe的暑期实习,研究的依然是GAN。2022年5月,Bill到Meta进行了为期半年的实习,和谢赛宁(Bill开始实习时还未离开Meta)合作发表了DiT模型,首次将Transformer与扩散模型(DiffusionModel)结合到了一起。从加州大学伯克利分校博士毕业之后,Bill加入了OpenAI。Sora的模型架构,就是参考了Bill与谢赛宁合作发表的DiT论文。值得一提的是,该论文主要聚焦在了DiT架构在图像生成领域的性能表现。有人推测,随着Bill加入OpenAI,他很可能把自己在视频领域的研究成果,也带到了OpenAI的Sora项目中。Sora的另一个核心作者是TimBrooks,曾在Google负责Pixel手机摄像头的机器学习工作,以及在英伟达负责视频生成模型研究。2023年从加州大学伯克利分校博士毕业后,Tim加入OpenAI,参与了DALL·E3相关研究。在其他几位作者中,也包括两位华人LiJing与YufeiGuo。今天,上海交大校友、目前在纽约大学担任助教的谢赛宁在朋友圈辟谣了自己是Sora作者之一的消息。他表示,Sora是Bill他们在OpenAI的呕心沥血之作,虽然不知道细节,但他们每天基本不睡觉高强度工作了一年。同时,谢赛宁也对Sora发表了他的观点:第一,对于Sora这样的复杂系统,人才第一,数据第二,算力第三,其他都没有什么是不可替代的;第二,在问Sora为什么没出现在中国的同时,可能也得问问假设真的出现了(可能很快),我们有没有准备好?如何能保证知识和创意的通畅准确传播让每个人拥有讲述和传播自己故事的“超能力”,做到某种意义上的信息平权。但是又不被恶意利用,变成某些人某些组织的谋利和操纵工具。oai有一整套的redteaming,safetyguardrail的研究部署,欧美有逐渐成熟的监管体系,我们准备好了吗?这件事跟技术成熟前,生成点小打小闹的漂亮图片不是一个量级,真相捕捉和黑镜里讲的故事,很有可能很快变成现实。(封面图来自X,左边为安德烈·卡帕蒂,右边为伊尔亚·苏茨克维)...PC版:https://www.cnbeta.com.tw/articles/soft/1419189.htm手机版:https://m.cnbeta.com.tw/view/1419189.htm

封面图片

OpenAI首席科学家大胆设想:人类未来将难免与AI融合

OpenAI首席科学家大胆设想:人类未来将难免与AI融合他指出,未来人工智能的兴起将鼓励人类与AI融合,在一个拥有更智能AI的世界中,人类的生存空间被不断压缩。虽然现在听起来很疯狂,但许多人会选择将自己部分AI化。他补充道,一开始只有最勇敢且具有冒险精神的人才会尝试,之后其他人会效仿。但他自己对这一可能性充满不确定,他也无法确定自己是否也会进行融合。如何控制AISutskever称,人工智能可能在未来十年内超过人类的智能,且AI未必是善意的,因此人类需要研究控制和限制它的方法。但Sutskever承认目前仍未出现解决方案。现在的技术主要是根据人类的反馈让AI进行强化学习,这依赖于人类监督AI的能力。但实际上,人类无法可靠有效地监督一个智能高于人类的AI系统。他还强调超级人工智能的概念,认为其将更深入地看待事物,并看到人类看不到的东西。为此,OpenAI成立了一个超级对齐团队(SuperAlignment),由Sutskever和超级对齐联合领导人JanLeike共同领导,目标在四年内解决控制超级智能AI的核心技术。不过,Sutskever的想法显然更加消极一些,一言以蔽之:打不过AI,那就加入AI。但这又和马斯克的想法十分接近。马斯克就指出他名下的Neuralink公司最终目标就是实现人类与人工智能的共生,还提出将人类大脑上传到云端的超前概念。然而,无论是OpenAI还是Neuralink都还有很长的路要走。OpenAI的ChatGPT目前还未解决幻觉问题,Neuralink则在大脑植入的活体实验中饱受攻讦。...PC版:https://www.cnbeta.com.tw/articles/soft/1393443.htm手机版:https://m.cnbeta.com.tw/view/1393443.htm

封面图片

OpenAI首席科学家IlyaSutskever将离职

封面图片

OpenAI联合创始人兼首席科学家IlyaSutskever宣布离职OpenAI联合创始人兼首席科学家IlyaSukever

封面图片

OpenAI 首席科学家 Ilya 决定离开公司

OpenAI首席科学家Ilya决定离开公司联合创始人兼首席科学家说到:近十年后,我决定离开OpenAI。公司的发展轨迹堪称奇迹,我相信OpenAI将在SamAltman、GregBrockman、MiraMurati以及JakubPachocki出色的研究领导下,打造既安全又有益的AGI。能够与大家共事是我的荣幸,我会非常想念大家。再见,感谢你们所做的一切。我很期待接下来的计划—个项目对我个人来说意义重大,我会在适当的时候分享细节。关注频道@ZaiHuaPd频道投稿@ZaiHuabot

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人