AI根据人类大脑活动重建视觉图像

AI根据人类大脑活动重建视觉图像这项研究利用了开源的StableDiffusion模型,由日本大阪大学的科学家完成。该AI模型能够有效地生成高质量图像,并且能够捕捉到图像中不同层次的特征,从低级的边缘和纹理到高级的语义和场景。他们使用功能性磁共振成像(fMRI)记录了人类大脑在观看不同类型的图片时产生的神经活动。然后设计了一个AI神经网络,学习大脑活动与StableDiffusion的潜在表示(图片的多维特征)之间的映射关系。通过这个网络,他们能够从大脑活动中重建出与原始图片非常相似的图像。投稿:@ZaiHuabot频道:@TestFlightCN

相关推荐

封面图片

人工智能根据大脑活动重建乐曲

人工智能根据大脑活动重建乐曲这段音频不是该摇滚乐队录制的,而是基于这段音乐倾听者的脑电波利用人工智能技术生成的。这是全世界首次根据神经信号重建出可辨认歌曲的科学实验。对于试图了解大脑如何对音乐做出反应的科学家,以及希望帮助神经受到严重损害的人通过脑机接口以听起来更自然的方式交流——无论是说话还是唱歌——的神经技术专家而言,这些发现极有价值。加利福尼亚大学伯克利分校心理学和神经科学教授罗伯特·奈特说:“音乐具有韵律和情感成分。”这项由奈特牵头的研究发现于15日发表在美国《科学公共图书馆·生物学》杂志上。奈特还说:“随着整个脑机接口领域向前发展,对需要语言或声音输出的人而言,这提供了一种向今后的大脑植入物添加人类音调和节奏的方法……这是我们真正开始破解的领域。”这项研究使用的脑电图记录获取于2012年,当时重度癫痫患者大脑表面上通常被放置很多组电极,以确定癫痫发作区域。这些脑电图记录的来源患者们自愿帮助科学研究,允许研究人员在他们倾听讲话和音乐时记录他们的脑电波。基于这些实验的以往研究,为科学家提供了足够数据来重建人们通过大脑活动听到的单个单词。但直到10年后的今天,人工智能才变得强大到足以重建歌曲段落。加利福尼亚大学伯克利分校的研究人员分析了29名患者的记录,这些患者倾听了“平克·弗洛伊德”的一首歌曲《墙上的另一块砖(第一部)》,这是该乐队1979年专辑《墙》的三部曲之一。研究人员确定了与感知节奏有关的大脑区域,发现听觉皮层部分区域——位于耳朵后面和上方——在歌声最开始或语音合成器开始发声时做出了反应,而另一些区域则对持续的声音做出了反应。这些发现支持长期以来关于大脑两个半球所发挥作用的观点。奈特说,尽管大脑两个半球配合密切,但语言主要在左半球接受处理,而“音乐的处理则更分散,并偏向右半球”。这些分析由奈特的同事卢多维克·贝利耶牵头。贝利耶说,用于在人们不能说话时帮助他们交流的设备往往会一个单词一个单词地发音。机器说出的句子具有机器人的特征,让人想起倾听配备语音生成设备的已故科学家斯蒂芬·霍金讲话的情景。加利福尼亚大学伯克利分校的研究人员说,大脑信息读取技术可能被拓展到这样一种程度:通过头戴脑电图电极帽解码围绕音乐的想法,而不必在颅骨下的大脑处放置电极。届时,人们或许能够想象或创作乐曲,把相关乐曲信息传输出去,并在外部音箱上播放。...PC版:https://www.cnbeta.com.tw/articles/soft/1378135.htm手机版:https://m.cnbeta.com.tw/view/1378135.htm

封面图片

AI根据人眼的反射图像重建3D场景

AI根据人眼的反射图像重建3D场景人眼的反射性质是一个未被充分重视的信息来源,马里兰大学帕克分校的研究员发现,通过AI模型和人类肖像中的眼睛反射,可以重建相机镜头之外的多个3D场景。所有健康成年人的角膜几何形状大致相同,如果计算图像中人类角膜的像素大小,就可以准确计算出他们眼睛的方位。利用这种判断力,研究员训练了一个眼睛反射的辐射场,为了消除重建中出现的虹膜,研究员同时训练AI学习了虹膜的2D纹理图来执行纹理分解。——频道:@TestFlightCN

封面图片

AIdea ▎AI 聊天、协作、图像生成(全平台支持,免费开源,全网AI技术)

名称:AIdea▎AI聊天、协作、图像生成(全平台支持,免费开源,全网AI技术)描述:AIdea▎AI聊天、协作、图像生成(全平台支持,免费开源,全网AI技术)▎软件介绍:AIdea是一款支持GPT以及国产大语言模型通义千问、文心一言等,支持StableDiffusion文生图、图生图、SDXL1.0、超分辨率、图片上色的全能型APP。▎软件特点:-支持GPT-3.5/4问答聊天-支持国产模型:通义千问,文心一言-支持文生图、图生图、超分辨率、黑白图片上色等功能,集成StableDiffusion模型,支持SDXL1.0▎支持平台:#iOS#Android#MacOS#网站(Web)#Windows(需自行编译)链接:https://pan.quark.cn/s/ccffd9a87844大小:66.2MB标签:#AI聊天#AI绘画#全平台#AIdea#quark来自:雷锋频道:@yunpanshare群组:@yunpangroup投稿:@kejiqubot

封面图片

SnapEdit AI v.5.8.0 高级版智能图像编辑软件

名称:SnapEditAIv.5.8.0高级版--智能图像编辑软件描述:一款基于AI技术的图像编辑软件,内置了多种AI算法模型,能够根据不同图片的特征进行智能识别和处理,从而实现高质量、精准的移除效果。用户只需将需要编辑的图片上传到软件中,然后选择想要移除的目标,软件便能轻松实现移除。链接:https://pan.quark.cn/s/5b1311e07631大小:56.2MB标签:#Android#软件#AI#SnapEdit#quark频道:@yunpanshare群组:@yunpangroup

封面图片

不到 15 秒,高通演示首次在安卓机型上使用 Stable Diffusion 生成 AI 图像

不到15秒,高通演示首次在安卓机型上使用StableDiffusion生成AI图像高通在其官方YouTube频道发布了一段视频,首次成功在安卓手机上使用StableDiffusion来生成AI图像,整个生成时间不超过15秒。高通表示这是全球首次在安卓设备上进行演示。StableDiffusion是一种非常流行的基础模型,它是一种文本到图像的生成AI模型,能够在几十秒内根据任何文本输入创建逼真的图像。StableDiffusion的参数超过10亿个,目前主要依靠云端运行。高通的本次演示主要利用了安卓设备上的QualcommAIStack,可以在安卓设备上运行StableDiffusion。高通在演示视频中,从HuggingFace的FP32版本1-5开源模型开始,通过量化、编译和硬件加速等优化流程,使其能够在搭载骁龙8Gen2移动平台的手机上运行。()()投稿:@ZaiHuabot频道:@TestFlightCN

封面图片

盖蒂与英伟达发布用授权图像训练的生成式 AI

盖蒂与英伟达发布用授权图像训练的生成式AI盖蒂与英伟达合作发布了GenerativeAIbyGettyImages,完全使用盖蒂图库的授权图像训练的生成式AI,将该工具生产的图像商业化会受到法律保护。该工具使用了英伟达的Edify模型。测试显示,盖蒂AI工具的图像质量与OpenAI的DALL-E3相近,优于开源图像模型StableDiffusion。Getty工具对用户生成图片的类型有限制,不允许生成任何真实人名的图像。盖蒂对此表示,它无意操纵或再现现实生活的事件。来源,频道:@kejiqu群组:@kejiquchat

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人