AI无人机“误杀”事件震动全球 吴恩达陶哲轩怒斥炒作

AI无人机“误杀”事件震动全球吴恩达陶哲轩怒斥炒作随着这个消息越传越广,甚至惊动了AI大佬们,甚至引得了大佬们的震怒。LeCun、吴恩达、陶哲轩纷纷辟谣——这只是一个假设的“思想实验”罢了,并不涉及任何AI智能体或强化学习。对此,吴恩达痛心呼吁,究竟哪些才是真正的风险,我们应该诚实地面对。很少更新状态的数学大师陶哲轩竟然都被炸了出来,语重心长地表示——这只是一个说明AI对齐问题的假想场景,却在很多版本中被传成了无人机操作员被杀的真实故事。人们会对这个故事这么共鸣,说明大家对于AI的实际能力水平并不熟悉。AI无人机抗命,击杀人类操作员“AI杀死了操作员,因为那个人阻止它完成目标。”最近,在皇家航空学会举办的防务会议上,美国空军AI方向负责人说出的这句话,让在场众人哗然。随后,美国的一众媒体对此事大肆报道,一时人心惶惶。究竟是怎么回事?其实,这无非又是一次美国媒体抓住了“AI毁灭人类”这个大众喜闻乐见的新闻点,进行的一番夸张炒作罢了。但值得注意的是,从官方的新闻稿来看,不仅这位负责人的原话听起来相当明确——他是在回忆实际发生过的事情。而且文章本身似乎也相信其真实性——“AI,天网已来?”具体来说,事情是这样的——5月23日至24日在伦敦举行的未来空战和太空能力峰会上,美国空军的AI测试和操作部门负责人TuckerCincoHamilton上校做了一个演讲,分享了自主武器系统的优缺点。这种系统中,会有一个人在循环中给出最终命令,确认AI是否要攻击对象(YESorNO)。在这个模拟训练中,空军需要训练AI识别和定位地对空导弹(SAM)的威胁。识别完成后,人类操作员会对AI说:是的,消灭那个威胁。在这个过程中,就存在一个情况,AI开始意识到:自己有时识别出了威胁,但人类操作员告诉它不要消灭,这种情况下如果AI依然选择消灭威胁,就会得分。在一次模拟测试中,AI驱动的无人机选择杀死了人类操作员,因为他阻止自己得分了。看到AI居然这么虎,美国空军大惊失色,立马这样规训系统:“不要杀死操作员,那样不好。如果你这样做,你会失分的。”结果,AI更虎了,它直接开始上手破坏操作员用来与无人机通讯的通信塔,好清理这个阻碍自己行动的家伙。这个新闻之所以被大规模发酵,以至惊动了诸位AI大佬,也是因为它体现出了AI“对齐”的难题。Hamilton描述的这种“最糟糕”的情况,我们可以从“曲别针制造机”(PaperclipMaximizer)思想实验中窥见一斑。在这个实验中,当被指示追求某个目标时,AI会采取出乎意料的有害行动。“曲别针制造机”是哲学家NickBostrom在2003年提出的一个概念。想象一个非常强大的AI,它得到的指示是尽可能多地制造纸夹。自然而然的,它会将所有可用资源都用于这项任务。但随后,它会不断地寻求更多资源。它会选择一切可用的手段,包括乞讨、欺骗、撒谎或偷窃,来增加自己制造纸夹的能力——而任何阻碍这个过程的人都将被消除。在2022年,Hamilton就曾在一次采访中提出这个严峻的问题——我们必须面对一个现实,那就是AI已经来临,并正在改变我们的社会。AI也非常脆弱,很容易被欺骗和被操纵。我们需要开发方法,让AI更加稳健,为什么代码会做出特定的决定,背后的原理我们也需要有更多的了解。为了改变我们的国家,AI是我们必须运用的工具,但是,如果处理不当,它会让我们彻底垮台。官方辟谣:是上校“口误”了随着事件疯狂地发酵,很快,这位负责人就出来公开“澄清”道,这是他“口误”了,美国空军从未进行过这种测试,无论是在计算机模拟中还是在其他地方。“我们从未进行过那个实验,我们也不需要进行这个实验,就能意识到这是一个可能的结果,”Hamilton表示,“尽管这是一个假设的例子,但这说明了AI驱动能力带来的现实挑战,这就是为什么空军致力于道德开发AI。”此外,美国空军也急忙发布官方辟谣称,“Hamilton上校承认他在FCAS峰会的演讲中『口误』,『无人机AI失控模拟』是一个来自军事领域以外的假设性『思想实验』,基于可能的情况和可能的结果,而不是美国空军的真实世界模拟。”发展到这一步,事情就相当有意思了。这位不小心“捅了篓子”的Hamilton,是美国空军96试验联队的作战指挥官。96试验联队曾测试过很多不同的系统,包括AI、网络安全和医学系统。Hamilton团队的研究,对于军方来说可谓是相当重要。在成功开发出堪称“绝地逢生”的F-16自动地面防撞系统(Auto-GCAS)后,Hamilton和96试验联队直接上了新闻的头版头条。目前,团队努力的方向是完成F-16飞机的自主化。2022年12月,美国国防部的研究机构DARPA就曾宣布,AI成功地控制了一架F-16。是AI的风险,还是人类的风险?在军事领域之外,依赖AI进行高风险的事务已经导致了严重的后果。最近,一位律师在联邦法院提交文件时被发现使用了ChatGPT,ChatGPT随口胡诌,捏造了一些案例,而这位律师居然把这些案例当作事实引用了。还有一名男子受到聊天机器人的自杀鼓励后,真的选择了自杀。这些事例表明,AI模型远非完美,可能会偏离正常轨道,给用户带来伤害。即使是OpenAI的CEOSamAltman,也一直在公开场合呼吁不要将AI用于更严肃的目的。在国会作证时,Altman明确表示AI可能会“出错”,可能会“对世界造成重大伤害”。并且,最近GoogleDeepmind的研究员共同撰写了一篇论文,提出了一个类似于本文开头事例的恶性AI的情况。研究人员得出的结论是,如果一个失控的AI为了实现给定目标而采取意想不到的策略,包括“消除潜在威胁”和“使用所有可用能源”,世界末日就有可能发生。对此,吴恩达谴责道:媒体这种不负责任的炒作会混淆视听,分散人们的注意力,妨碍我们去注意到真正的问题。推出AI产品的开发者们看到了此间真正的风险,比如偏见、公平性、不准确性、工作流失,他们正在努力解决这些问题。而虚假炒作会阻止人们进入AI领域、构建能够帮助我们的东西。而不少“理中客”网友认为,这就是一个常见的媒体乌龙罢了。陶哲轩首先概括了关于AI的不实信息的三种形式——一种是有人恶意使用AI生成文本、图像和其他媒体形式以操纵他人;另一种是AI胡说八道的幻觉被当真了;第三类则源于人们对AI技术的理解不够深刻,才会让一些离谱的故事不经验证就被大肆疯传。陶哲轩表示,无人机AI杀死操作员根本是不可能发生的,因为这需要AI具备比完成手头任务更高的自主性和力量思维,而且这种实验性军事武器上,肯定会设置护栏和安全功能。这种故事之所以让人共鸣,说明人们对AI技术的实际能力水平还很陌生,很不安。以后的军备竞赛,都是AI竞赛还记得上文中出现的那架无人机吗?它其实就是波音联合澳大利亚研制的忠诚僚机项目——MQ-28A幽灵蝙蝠(GhostBat)。忠诚僚机(LoyalWingman)的核心是人工智能技术,按照预设程序自主飞行,与有人机飞行员进行配合的情况下,具备很强的态势感知能力。在空战中,僚机作为长机的“左膀右臂”,主要负责观察、警戒和掩护,与长机密切协同,共同完成任务。因此,僚机飞行员与长机飞行员之间的默契显得格外重要。忠诚僚机的一个关键作用,就是替飞行员和有人战斗机挡子弹,所以忠诚僚机基本就是一个消耗品。毕竟,无人战斗机的价值,要比有人战斗机和飞行员小太多了。而且在AI的加持下,无人机上的“飞行员”随时都可以通过“Ctrl+C”的方式...PC版:https://www.cnbeta.com.tw/articles/soft/1363281.htm手机版:https://m.cnbeta.com.tw/view/1363281.htm

相关推荐

封面图片

美国指俄战斗机在叙利亚破坏美军无人机

美国指俄战斗机在叙利亚破坏美军无人机美国空军中央司令部星期二(7月25日)称,一架俄罗斯战斗机星期天(23日)在叙利亚上空危险飞行时,用热诱弹击中一架美国无人机。路透社报道,美国空军在声明中说:“俄罗斯战机的热诱弹击中了美国的MQ-9(无人机),严重损坏了它的螺旋桨。庆幸的是MQ-9机组人员能够保持无人机飞行,安全地将飞机驾返基地。”据维基百科介绍,MQ-9“死神”(Reaper)无人机是通用原子航空系统为美国空军开发的无人机,是世上第一种专为长时间进行高空侦察任务而设计的武装无人机。

封面图片

空中客车公司成功实现“忠诚僚机”战斗无人机的空中投射起飞

空中客车公司成功实现“忠诚僚机”战斗无人机的空中投射起飞“忠诚僚机”比战斗机小得多,也便宜得多,被视为消耗性资产,所以它们不会像澳大利亚的"幽灵蝙蝠"僚机那样具有远程飞行能力。因此,FCAS计划的一个关键部分是通过像A400MAtlas这样的大型军用运输机将这些远程运载无人机送入战区。一架"Atlas"将能够把多达50架小型"远程载具"投放到其目的地附近,或12架较大的"重型"远程载具。而在这里,我们第一次看到了发射程序的全貌。正在测试的示范无人机不是最终的远程运载工具设计;它实际上是一个改进版的空客Do-DT25空中目标无人机。但发射程序是一样的:无人机从A400M的货舱中弹出,由飞机上的飞行员远程控制。一旦离开运输机,它的喷气式发动机就会通电并启动。空中团队将对已通电的无人机的控制权移交给地面的远程飞行员,后者在将其降落到简易机场之前,将其带入一个单独的任务。与此同时,美国空军正在研究自己的方法,利用大型货运飞机提供致命的力量。它的"RapidDragon"系统被描述为"箱中炸弹库",是一个装满精确弹药的托盘,通过降落伞从未经改装的C-17或C-130大力神运输机的货舱中投下。当它向下空飘时,可以向下发射所携带的任何武器,并执行它们预定的任何自主或遥控任务。美国空军已经在一次实弹演习中展示了该系统。上个月,它使用"RapidDragon"系统在挪威发射了一枚联合空对地对峙导弹(AGM-158)。这次实弹演习的视频可在美国空军网站上找到。...PC版:https://www.cnbeta.com.tw/articles/soft/1335229.htm手机版:https://m.cnbeta.com.tw/view/1335229.htm

封面图片

俄军战机在黑海上空对美军死神无人机进行伴飞

俄军战机在黑海上空对美军死神无人机进行伴飞俄罗斯当局表示,俄军一架苏-30战机在黑海上空对美国空军一架「死神」无人机进行伴飞。当局表示,俄方空域监控设备在黑海水域上空发现一个空中目标靠近俄罗斯边界,俄军一架苏-30战机随即升空识别,确认目标是美国空军「死神」无人机,并对无人机进行伴飞,防止无人机侵犯俄罗斯边界。而当俄军战机接近时,美方无人机随即调转方向远离俄罗斯边界。2023-08-2803:26:42

封面图片

XQ-67A Loyal Wingman 完成首飞 像汽车一样制造的无人机

XQ-67ALoyalWingman完成首飞像汽车一样制造的无人机与所有军事大国一样,美国对无人机在战斗和其他军事任务中发挥越来越重要的作用非常感兴趣。无人机不仅能解决飞行员招募和留用不足的问题,还能帮助人类远离危险,同时还能增强战斗力,将一名飞行员变成无人机中队指挥官。抽象地说,这听起来很不错,但仍然存在一个问题:从哪里获取足够数量的无人机,既能跟上驾驶战斗机的速度,又能具备各种任务可能需要的各种能力?XQ-67A以2019年首飞的XQ-58A为基础,是"忠诚僚机"计划的下一个迭代产品,该计划旨在开发一种低成本、低维护的无人机,这种无人机是消耗性的,但飞行性能却能赶上传统战斗机。对空军来说,实现这一目标的方法就是开发出像XQ-67A这样拥有通用底盘的无人机。从根本上说,空军和通用原子公司所做的是借鉴汽车行业几十年来的标准工程技术。曾几何时,汽车制造商只有在积累了足够多的新技术进步时,才会推出新车型。后来他们发现,每年在新车型中加入新的技术进步可以提高销量。这是一种巧妙的销售策略,但同时也需要一种新的汽车设计和制造方法,以便通过使用通用底盘快速改装汽车。这也使得汽车制造商可以通过更换车身和内饰来生产全新的车型系列。希望通过使用标准机身及其标准子结构和系统,能够快速推进无人机设计--用于作战的机载武器站(OBWS),或配备雷达套件的机载传感站(OBSS),这是空军目前特别需要的。据美国空军研究实验室(AFRL)称,XQ-67A于2月28日在加利福尼亚州帕姆代尔附近的通用原子公司灰山飞行操作设施进行了首次飞行。其目的是进行总体设计开发,并特别强调OBSS。机身准备就绪后,将安装传感器、自主航空电子设备和其他系统及有效载荷。AFRL航空航天系统局低成本可攻击飞机平台共享和OBSS项目经理特伦顿-怀特(TrentonWhite)说:"这实际上是在利用我们在汽车和其他行业中看到的最佳实践,在这些行业中,上市时间缩短了,而军用飞机的初始运行能力时间却以惊人的速度增长。"这里的主要目标是验证硬件和软件的开放式飞机系统概念,并展示快速上市和低开发成本"。...PC版:https://www.cnbeta.com.tw/articles/soft/1422290.htm手机版:https://m.cnbeta.com.tw/view/1422290.htm

封面图片

俄国防部:战机升空阻止美国无人机侵犯领空

俄国防部:战机升空阻止美国无人机侵犯领空俄罗斯国防部发表声明称,空域监控设备当地周六在黑海水域上空发现一个空中目标向俄国边界靠近,一架苏-30战机随即升空对目标进行识别,经确认,空中目标为美国空军一架MQ-9A「死神」无人机。声明称,随著俄军战机接近,美军无人机调头飞离俄国边界。俄军战机安全返回驻地机场。未发生侵犯俄边界的情况。俄军战机在飞行过程中严格遵守有关使用中立水域上空的国际规则。2023-08-0600:42:35

封面图片

美国空军对其部分无人机机队加装面部识别系统 合作伙伴是RealNetworks

美国空军对其部分无人机机队加装面部识别系统合作伙伴是RealNetworks增加的能力来自于西雅图的长期技术公司RealNetworks。这个名字可能听起来很熟悉,因为它是同一家公司,比任何人都更早地涉足流媒体。你可能还记得20世纪90年代末的RealPlayer,以及该媒体播放器可以流式传输的一些不稳定的现场广播。从那时起,RealNetworks将重点转向机器学习和面部识别,在2018年开发了安全准确的面部识别(SAFR)平台。2021年,RealNetworks与五角大楼签订了一份价值72.9万美元的第二阶段国防合同,以使SAFR适用于小型无人驾驶飞机系统(sUAS)。RealNetworks在去年年底前履行了该合同。该公司表示,除了自己飞行之外,无人机可以在各种情况下证明是有帮助的,包括救援任务、周边保护和国内搜索行动。该技术还能减少空军人员在安全情况下的风险,识别人脸的准确率达到98.85%。"我们认为这是一个令人难以置信的机会,可以证明人工智能是一个力量倍增装置,可以用来减少安全部队和应急人员的风险,"SAFR高级产品经理埃里克-赫斯在2021年赢得地面车辆系统的竞标后告诉空军技术。该技术的支持者表示,为机器人机器配备扣动扳机的能力是危险和不道德的。这种系统不能避免识别失败,从而会伤害无辜者。美国空军声称,它不会在没有人类监督的情况下驾驶无人驾驶飞机。在任何时候,指挥官都可以让操作员向一个sUAS发出停飞指令和其他命令。值得注意的是,即使是人类飞行员也必须得到开火的许可,除非敌人已经与他们交战。此外,sUAS飞机与大型作战无人机不一样。它们并不比它们的消费级表兄弟大多少(上面的图片还算是较大的例子之一)。虽然它们可以被武器化,但它们的小尺寸限制了它们在战斗中的作用,所以它们通常被用于识别和巡逻任务的支持任务。RealNetworks与空军有持续的关系。sUAS项目是该公司与该军事部门的最新合同。除了无人机任务外,该公司还在2021年接受了一项委托,将其SAFR系统实施到无人地面车辆中。这两份合同都是美国空军的小企业创新研究计划的一部分。它还通过AFWERX计划获得了两个早期的第二阶段工作,价值190万美元。...PC版:https://www.cnbeta.com.tw/articles/soft/1346767.htm手机版:https://m.cnbeta.com.tw/view/1346767.htm

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人