RT 云中月可怕！

RT 云中月 可怕！ 站得更高的精英们应该是看到了什么普罗大众不知道的事情。一封公开信刚刚得到1000多名（还在持续增加中）精英的签名: 我们呼吁所有人工智能实验室立即暂停比GPT-4更强大的人工智能系统的训练至少6个月。如果不能迅速实施这种暂停，政府应该介入并实行暂停令。

马斯克和一些业内专家呼吁暂停比GPT-4更强大AI的训练，理由是担忧对人类社会构成危险

马斯克和一些业内专家呼吁暂停比GPT-4更强大AI的训练，理由是担忧对人类社会构成危险 埃隆·马斯克和一群人工智能专家和行业高管在一封公开信中说，他们呼吁暂停训练比GPT-4更强大的系统六个月，理由是对社会和人类的潜在风险。 这封信由非营利性的 "生命未来研究所 "发布，包括马斯克、苹果公司联合创始人史蒂夫-沃兹尼亚克和稳定人工智能首席执行官埃马德-莫斯塔克在内的1000多人签署，呼吁暂停先进的人工智能开发，直到此类设计的共享安全协议被制定、实施并由独立专家审计。 信中说："只有当我们确信强大的人工智能系统的效果是积极的，其风险是可控的，才应该开发。" 信中还详细介绍了人类竞争性人工智能系统以经济和政治混乱的形式对社会和文明的潜在风险，并呼吁开发者与政策制定者在治理和监管机构方面进行合作。 这封信是在欧盟警察部队Europol周一加入了对ChatGPT等先进人工智能的道德和法律担忧的合唱，警告说该系统可能被滥用于网络钓鱼企图、虚假信息和网络犯罪。

估计是为了讽刺1000人签名暂停研究比GPT4还厉害的AI

估计是为了讽刺1000人签名暂停研究比GPT4还厉害的AI 有人用机器人为玩具蟾蜍配上隐形眼镜，说让它能看得更清楚去捕捉虫子，这完全是在炫耀机器人吧。 还说因为随着通用人工智能的出现，人类将很快成为软件行业中最薄弱的环节。 怎样才能拥有更好的编码伙伴来增强人类，至少不是蟾蜍。

1000多名人工智能专家及行业高管签署联名信，呼吁暂停训练比GPT-4更强大的人工智能系统至少六个月

1000多名人工智能专家及行业高管签署联名信，呼吁暂停训练比GPT-4更强大的人工智能系统至少六个月 理由是这种系统对社会和人类构成潜在风险。信中写道:“只有在我们确信它们的效果是积极的，风险是可控的情况下，才应该开发强大的人工智能系统。”马斯克此前曾多次表达对人工智能的担忧，认为人工智能是未来人类文明最大的风险之一，威胁程度远高于车祸、飞机失事、毒品泛滥等，甚至比核武器都危险得多。 可以去这里签名：《》目前已经有1000多名精英人士签名了。 - Yoshua Bengio，蒙特利尔大学，图灵奖得主，开发深度学习，蒙特利尔学习算法研究所所长 - Stuart Russell，伯克利，计算机科学教授，智能系统中心主任，标准教科书“人工智能：现代方法”的合著者 - Elon Musk，SpaceX、Tesla 和 Twitter 的首席执行官 - Steve Wozniak, Co-founder, Apple 苹果联合创始人史蒂夫·沃兹尼亚克 - Jaan Tallinn，Skype 联合创始人，生存风险研究中心，未来生命研究所 ...... 来自：雷锋 频道：@kejiqu 群组：@kejiquchat 投稿：@kejiqubot

OpenAI 探索用 GPT-2 小模型监督 GPT-4 大模型，防止 AI 毁灭人类

OpenAI 探索用 GPT-2 小模型监督 GPT-4 大模型，防止 AI 毁灭人类 Ilya 领衔的 OpenAI 对齐团队，发表了 用类似 GPT-2 监督 GPT-4 的方法，或可帮人类搞定自己更聪明的超级 AI！ 团队声称，已经发现了对超人类模型进行实证对齐的新研究方向。未来超级 AI 系统对齐的一个核心挑战 人类需要监督比自己更聪明人工智能系统。 来源， 频道：@kejiqu 群组：@kejiquchat

研究人员发出警告AI系统已学会如何欺骗人类

研究人员发出警告AI系统已学会如何欺骗人类 第一作者、麻省理工学院人工智能存在安全博士后彼得-S-帕克（Peter S. Park）说："人工智能开发人员对造成欺骗等不良人工智能行为的原因并不十分了解。但一般来说，我们认为人工智能欺骗行为的产生是因为基于欺骗的策略被证明是在特定人工智能训练任务中表现出色的最佳方式。欺骗有助于它们实现目标。"Park 及其同事分析了相关文献，重点研究了人工智能系统传播虚假信息的方式通过学习欺骗，系统地学会操纵他人。研究人员在分析中发现的最显著的人工智能欺骗例子是 Meta 公司的 CICERO，这是一个专门用来玩"外交"游戏的人工智能系统。尽管 Meta 公司声称它训练 CICERO"基本上是诚实和乐于助人的"，并且在玩游戏时"从不故意背叛"人类盟友，但该公司随其科学论文一起发表的数据显示，CICERO 玩得并不公平。Meta 的 CICERO 在外交游戏中的欺骗示例。资料来源：Patterns/Park Goldstein et al.Park 说："我们发现，Meta 的人工智能学会了欺骗。虽然 Meta 成功地训练其人工智能在外交游戏中获胜CICERO 在参加过不止一次游戏的人类玩家中名列前 10%，但 Meta 却未能训练其人工智能以诚实的方式获胜"。其他人工智能系统也展示了在与人类职业玩家进行的德州扑克游戏中虚张声势的能力，在战略游戏《星际争霸 II》中伪造攻击以击败对手的能力，以及在经济谈判中歪曲自己的偏好以占上风的能力。Park 补充说，虽然人工智能系统在游戏中作弊看似无害，但这可能会导致"人工智能欺骗能力的突破"，并在未来演变成更高级的人工智能欺骗形式。研究人员发现，一些人工智能系统甚至学会了欺骗旨在评估其安全性的测试。在一项研究中，数字模拟器中的人工智能生物"装死"，以骗过为消除快速复制的人工智能系统而设计的测试。通过有计划地欺骗人类开发人员和监管机构对其进行的安全测试，欺骗性人工智能会让我们人类陷入虚假的安全感。GPT-4 完成验证码任务。图片来源：Patterns/Park Goldstein et al.帕克警告说，欺骗性人工智能的主要近期风险包括使敌对行为者更容易实施欺诈和篡改选举。他说，最终，如果这些系统能够完善这种令人不安的技能组合，人类可能会失去对它们的控制。"作为一个社会，我们需要尽可能多的时间来为未来人工智能产品和开源模型更先进的欺骗能力做好准备，"Park 说。"随着人工智能系统的欺骗能力越来越先进，它们给社会带来的危险也将越来越严重。"虽然 Park 和他的同事们认为社会还没有正确的措施来解决人工智能欺骗问题，但他们感到鼓舞的是，政策制定者已经通过欧盟人工智能法案和拜登总统的人工智能行政命令等措施开始认真对待这个问题。但 Park 说，鉴于人工智能开发人员尚不具备控制这些系统的技术，旨在减少人工智能欺骗行为的政策能否得到严格执行还有待观察。"如果禁止人工智能欺骗在当前政治上不可行，我们建议将欺骗性人工智能系统归类为高风险，"Park 说。编译来源：ScitechDaily ... PC版： 手机版：