研究发现人工智能算法对黄色皮肤存在偏见

研究发现人工智能算法对黄色皮肤存在偏见索尼公司的研究人员表示,目前常用的肤色测量方法仅使用从最浅到最深或从白到黑的滑动尺度来表示肤色,从而忽略了黄色和红色色调对人类肤色范围的影响。他们发现,生成式人工智能系统、图像抓取算法和照片分析工具在处理较黄的皮肤时都特别吃力。同样的弱点也可能适用于各种已被证实准确性会受肤色影响的技术,如用于人脸识别、身体跟踪和深度伪造检测的人工智能软件,或心率监测器和运动探测器等小工具。索尼公司首席研究科学家兼人工智能伦理全球负责人爱丽丝-项(AliceXiang)说:"如果只是以这种非常单一的方式对产品进行评估,那么就会有很多偏见没有被发现和减轻。我们的希望是,我们在这里所做的工作可以帮助取代一些现有的肤色量表,这些量表实际上只关注浅色与深色。"但并非所有人都确信,现有的选择不足以对人工智能系统进行分级。哈佛大学社会学家埃利斯-蒙克(EllisMonk)说,他去年与Google一起推出的由10种肤色组成的调色板,提供了从浅到深的选项,但这并不是单一维度的。蒙克说:"我必须承认,我对之前这方面的研究忽略了底色和色调的说法感到有些困惑。研究工作致力于决定在量表中优先考虑哪些肤色,以及在哪些点上优先考虑哪些肤色。他根据自己对肤色歧视的研究,并在咨询了其他专家和来自代表性不足社区的人之后,选择了他的量表中的10种肤色。"X.人工智能伦理咨询公司MaloSanto的首席执行官、Google肤色研究团队的创始人Eyeé表示,蒙克量表从未打算作为最终解决方案,并称索尼的工作是重要的进步。但Eyeé也提醒说,相机定位会影响图像中的CIELAB颜色值,这是导致该标准成为潜在不可靠参考点的几个问题之一。Eyeé说:"在我们将皮肤色调测量应用于现实世界的人工智能算法(如相机滤镜和视频会议)之前,还需要做更多的工作来确保测量的一致性。"关于量表的争论不仅仅是学术性的。找到人工智能研究人员所说的"公平性"的适当衡量标准,是科技行业的当务之急,因为欧盟和美国等国的立法者正在讨论要求公司对其人工智能系统进行审计,并指出风险和缺陷。索尼公司的研究人员说,不健全的评估方法可能会削弱法规的一些实际好处。关于肤色,Xiang说,制定更多改进措施的努力是有必要的:"我们需要不断尝试,以取得进展。根据不同的情况,不同的措施可能会被证明是有用的。我很高兴,在长期被忽视之后,人们对这一领域的兴趣与日俱增。"Google发言人布莱恩-加布里埃尔(BrianGabriel)则表示,公司欢迎这项新研究,并正在对其进行审查。人的肤色来自于光线与蛋白质、血细胞以及黑色素等色素的相互作用。测试算法是否因肤色而产生偏差的标准方法是检查算法在不同肤色上的表现,从最浅到最深的六个选项被称为菲茨帕特里克量表。该量表最初由皮肤科医生开发,用于评估皮肤对紫外线的反应。去年,科技界的人工智能研究人员对Google推出的蒙克量表大加赞赏,称其更具包容性。索尼公司的研究人员在本周于巴黎举行的国际计算机视觉会议(InternationalConferenceonComputerVision)上提交的一份研究报告中称,用于照片编辑和制造的国际色彩标准CIELAB为表现皮肤的广泛光谱提供了一种更忠实的方法。当他们应用CIELAB标准分析不同人的照片时,发现他们的皮肤不仅在色调(颜色的深度)上存在差异,而且在色相(即颜色的渐变)上也存在差异。不能正确捕捉人体皮肤中红色和黄色色调的肤色尺度似乎帮助了一些偏差在图像算法中不被发现。索尼公司的研究人员测试了开源人工智能系统,包括Twitter开发的图像捕捉器和一对图像生成算法,他们发现这些算法偏爱红色皮肤,这意味着在算法输出的最终图像中,大量皮肤偏黄的人没有得到充分体现。这有可能使包括东亚、南亚、拉丁美洲和中东在内的不同人群处于不利地位。索尼公司的研究人员提出了一种表现肤色的新方法,以捕捉以前被忽视的多样性。他们的系统使用两个坐标而不是一个数字来描述图像中的肤色。它既指定了肤色从浅到深的位置,也指定了从黄到红的位置,即化妆品行业有时所说的从暖到冷的底色。新方法的工作原理是分离图像中显示皮肤的所有像素,将每个像素的RGB颜色值转换为CIELAB代码,然后计算皮肤像素群的平均色调和色调。研究中的一个例子显示,前美国橄榄球明星特雷尔-欧文斯和已故女演员伊娃-嘉宝的明显头像具有相同的肤色,但色调不同,欧文斯的图像偏红,嘉宝的图像偏黄。不能正确捕捉人体皮肤红色和黄色色调的色标有助于图像算法中的偏差不被发现。当索尼团队将他们的方法应用于网上的数据和人工智能系统时,他们发现了重大问题。研究人员发现,CelebAMask-HQ(一个用于训练面部识别和其他计算机视觉程序的流行名人面孔数据集)有82%的图像偏向红色肤色,而另一个由NVIDIA开发的数据集FFHQ有66%偏向红色。在FFHQ上训练的两个人工智能生成模型再现了这种偏差:它们各自生成的每五张图像中,约有四张偏向红色色调。问题还不止于此。根据索尼公司的研究,当要求人工智能程序ArcFace、FaceNet和Dlib识别两张肖像是否对应同一个人时,它们在红色皮肤上的表现更好。Dlib的开发者戴维斯-金(DavisKing)说,他对这种偏差并不感到惊讶,因为该模型主要是在美国名人照片上训练出来的。微软Azure和亚马逊网络服务公司提供的用于检测微笑的云人工智能工具在较红的色调上也有较好的效果。微软负责人工智能工程的萨拉-伯德(SarahBird)说,公司一直在加强对公平性和透明度的投资。亚马逊发言人帕特里克-尼霍恩(PatrickNeighorn)说:"我们欢迎与研究界合作,我们正在仔细审查这项研究。"NVIDIA则拒绝发表评论。作为一个黄皮肤的人,Xiang对揭示当今人工智能测试方式的局限性非常关注。她表示,索尼将使用新系统分析自己的以人为本的计算机视觉模型,因为这些模型需要接受审查,但她拒绝具体说明是哪些模型。"我们每个人的皮肤都有不同的色调。这不应该被用来歧视我们,"她说。索尼的做法还有一个潜在优势。像Google的蒙克量表(Monkscale)这样的测量方法需要人类对特定个体的皮肤在光谱中的位置进行分类。人工智能开发人员说,这是一项会带来变数的任务,因为人们的看法会受到所在位置或自身种族和身份观念的影响。索尼的方法是完全自动化的,不需要人工判断。但哈佛大学的蒙克质疑这是否更好。像索尼这样的客观测量方法最终可能会简化或忽略人类多样性的其他复杂性。他说:"如果我们的目标是剔除偏见,而偏见也是一种社会现象,那么我就不太确定我们是否应该从分析中剔除人类是如何从社会角度看待肤色的。"...PC版:https://www.cnbeta.com.tw/articles/soft/1387957.htm手机版:https://m.cnbeta.com.tw/view/1387957.htm

相关推荐

封面图片

《深入浅出AI算法:基础概览》迈入人工智能算法大门

名称:《深入浅出AI算法:基础概览》迈入人工智能算法大门描述:《深入浅出AI算法:基础概览》从理论到实践,循序渐进地介绍了人工智能算法的基础知识,帮助读者敲开人工智能算法之门。提供PDF、azw3、mobi、epub格式。链接:https://pan.quark.cn/s/2222d056cc76大小:20.9MB标签:#AI#人工智能#图书#深入浅出AI算法#quark频道:@yunpanshare群组:@yunpangroup

封面图片

研究发现:用人工智能生成的图像训练出的人工智能产生了糟糕的结果。

研究发现:用人工智能生成的图像训练出的人工智能产生了糟糕的结果。斯坦福大学和莱斯大学的研究人员发现,生成式人工智能模型需要“新鲜的真实数据”,否则输出的质量就会下降。这对摄影师和其他创作者来说是个好消息,因为研究人员发现,训练数据集中的合成图像会放大人工痕迹,使人工智能画出的人类看起来越来越不像真人。研究小组将这种状况命名为“模型自噬障碍”。如果自噬循环的每一代都没有足够的新鲜真实数据,未来的生成模型注定会逐渐降低其质量或多样性。如果该研究论文是正确的,那么这意味着人工智能将无法开发出无穷无尽的数据源。人工智能仍然需要真实、高质量的图像来不断进步,而不是依赖自己的输出。这意味着生成式人工智能将需要摄影师。——

封面图片

【门头沟颁布北京首个人工智能算法领域专门人才政策】

【门头沟颁布北京首个人工智能算法领域专门人才政策】2023年05月08日10点13分老不正经报道,北京市门头沟区金隅琉璃文化创意产业园举办2023中关村论坛系列活动——北京人工智能产业创新发展人才高峰论坛,活动现场颁布北京市首个人工智能算法领域专门人才政策及人工智能领域人才培养方案,并聘请中国工程院倪光南院士担任京西智谷专家顾问,搭建人才发展成长空间和实践舞台,为北京市乃至全国整个人工智能产业培养人才。

封面图片

科学家开发新的人工智能算法 可能导致癫痫的治愈

科学家开发新的人工智能算法可能导致癫痫的治愈在伦敦大学学院(UCL)科学家们指导下工作的一个国际研究团队创建了一种人工智能(AI)算法,可以识别导致癫痫发作的细微大脑异常。为了创建该算法,揭示局灶性脑皮质发育不良(FCD)--癫痫的一个主要原因--的实例中出现异常的地方,多中心癫痫病变检测项目(MELD)分析了来自22个国际癫痫中心的1000多名患者的MRI图像。FCD是发展异常的大脑区域,常常导致耐药性癫痫。手术通常用于治疗,然而,在MRI上找到病变是医生一直面临的问题,因为FCD的MRI扫描可能看起来正常。科学家们利用整个大脑的大约30万个位置来开发该算法,该算法利用MRI扫描测量皮质特征,如皮质/大脑表面的厚度或折叠程度。之后,根据模式和特征,专业放射科医生将例子分为患有FCD或拥有健康的大脑,作为该算法的训练数据。根据发表在《大脑》杂志上的结果,该算法成功识别了队列中67%的病例(538名参与者)的FCD。此前,有178人被宣布为MRI阴性,这意味着放射科医生无法检测到异常;然而,MELD算法能够在这些案例中的63%检测到FCD。这一点特别关键,因为如果医务人员能够在脑部扫描中识别出异常,那么通过手术切除它就可能提供治愈。共同第一作者MathildeRipart(UCL大奥蒙德街儿童健康研究所)说:“我们把重点放在创建一个可解释的人工智能算法上,并能帮助医生做出决定。向医生展示MELD算法是如何进行预测的,是这一过程的一个重要部分。”共同第一作者KonradWagstyl博士(UCL皇后广场神经学研究所)补充说:“这种算法可以帮助发现更多儿童和成人癫痫患者的这些隐藏病变,并使更多的癫痫患者被考虑进行脑部手术,从而治愈癫痫并改善其认知发展。在英国,每年大约有440名儿童可以从癫痫手术中受益。”世界上约有1%的人口患有严重的神经系统疾病癫痫,其特点是频繁发作。在英国,大约有60万人受到影响。虽然大多数癫痫患者都有药物治疗,但20-30%的人对药物没有反应。在接受手术控制癫痫的儿童中,FCD是最常见的原因,而在成年人中,它是第三大原因。此外,在脑部有异常但在MRI扫描中无法发现的癫痫患者中,FCD是最常见的原因。共同第一作者,HelmholtzMunich博士说:“我们的算法能够自动学习,从数以千计的病人的MRI扫描中检测出病变。它可以可靠地检测出不同类型、形状和大小的病变,甚至许多以前被放射科医生漏掉的病变。”共同第一作者SophieAdler博士(UCL大奥蒙德街儿童健康研究所)补充说:“我们希望这项技术将有助于识别目前被遗漏的、导致癫痫的异常情况。最终,它可以使更多的癫痫患者接受潜在的治愈性脑部手术。”这项关于FCD检测的研究使用了迄今为止最大的FCD的MRI队列,这意味着它能够检测所有类型的FCD。MELDFCD分类工具可以在任何怀疑有FCD的3岁以上并有MRI扫描的病人身上运行。PC版:https://www.cnbeta.com/articles/soft/1313959.htm手机版:https://m.cnbeta.com/view/1313959.htm

封面图片

人工智能发现了更快的排序算法

人工智能发现了更快的排序算法谷歌Deepmind的新AI系统AlphaDev使用深度学习发现了更快的排序算法。他们采取了与国际象棋和围棋相同的方法:把代码优化变成了一种游戏。AlphaDev开发了x86汇编算法,将代码的延迟视为一个分数,并试图将这个分数降到最低,同时确保代码运行到完成时没有错误。他们希望将新的算法纳入到LLVM的C++排序库中,不过问题是,这些代码是用汇编而不是C++,因此,他们不得不反向移植,找出能够产生相同汇编的C++代码。研究人员称,这是排序库算法方面十年来的首次突破。新算法对较短序列的排序速度提升了最高70%,而对超过25万个元素的长序列速度提升了1.7%。消息来源:投稿:@ZaiHuaBot频道:@TestFlightCN

封面图片

人工智能偏见暴露:亚洲女性头像变白

人工智能偏见暴露:亚洲女性头像变白RonaWang说:“种族偏见是人工智能工具中反复出现的问题。我从人工智能照片生成器或编辑器那里得不到任何可用的结果,所以我现在不得不放弃新的LinkedIn个人资料照片!”尽管她并不是唯一一个被图像生成器变白或得到种族主义输出的人,但这起事件再次引起了人工智能造成混乱的关注,即使公司急于取代人类工人,这个软件仍然存在严重的不完善和不准确性。PlaygroundAI的首席执行官SuhailDoshi对此作出了回应,并解释了系统的不完美性。虽然这并不是唯一一起因图像生成器而引发种族偏见的事件,但这个例子再次显示了人工智能在取代人类工作时的问题。这种不完善且不准确的软件在训练中很容易出现种族偏见。...PC版:https://www.cnbeta.com.tw/articles/soft/1374575.htm手机版:https://m.cnbeta.com.tw/view/1374575.htm

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人