AI根据人眼的反射图像重建3D场景

AI根据人眼的反射图像重建3D场景 人眼的反射性质是一个未被充分重视的信息来源,马里兰大学帕克分校的研究员发现,通过AI模型和人类肖像中的眼睛反射,可以重建相机镜头之外的多个3D场景。 所有健康成年人的角膜几何形状大致相同,如果计算图像中人类角膜的像素大小,就可以准确计算出他们眼睛的方位。利用这种判断力,研究员训练了一个眼睛反射的辐射场,为了消除重建中出现的虹膜,研究员同时训练AI学习了虹膜的2D纹理图来执行纹理分解。

相关推荐

封面图片

AI根据人类大脑活动重建视觉图像

AI根据人类大脑活动重建视觉图像 这项研究利用了开源的 Stable Diffusion 模型,由日本大阪大学的科学家完成。该AI模型能够有效地生成高质量图像,并且能够捕捉到图像中不同层次的特征,从低级的边缘和纹理到高级的语义和场景。 他们使用功能性磁共振成像 (fMRI) 记录了人类大脑在观看不同类型的图片时产生的神经活动。然后设计了一个AI神经网络,学习大脑活动与 Stable Diffusion 的潜在表示 (图片的多维特征) 之间的映射关系。通过这个网络,他们能够从大脑活动中重建出与原始图片非常相似的图像。

封面图片

新的Meta 3D Gen可在一分钟内根据文本生成高质量的3D素材

新的Meta 3D Gen可在一分钟内根据文本生成高质量的3D素材 Meta 的人工智能研究团队最近推出了 Meta 3D Gen (3DGen),这是一种用于文本到 3D 素材生成的最先进的新系统。Meta 声称,这一新系统可以在一分钟内生成高质量的 3D 素材。生成的三维素材将具有高分辨率纹理和材质贴图。3DGen 还支持基于物理的渲染(PBR)和对以前生成的 3D 素材进行生成再纹理。Meta 3D Gen 结合了两个主要组件:文本到 3D 生成和文本到纹理生成。下面是它的工作原理:第一阶段:三维素材生成根据用户提供的文本提示,第一阶段使用 Meta 的三维素材生成模型(AssetGen)创建初始三维素材。这一步将生成带有纹理和 PBR 材质贴图的 3D 网格。推理时间约为 30 秒。第 2 阶段:用例 1:生成三维纹理细化根据阶段 1 生成的三维素材和初始文本提示,阶段 2 将为该素材生成更高质量的纹理和 PBR 贴图。它使用 Meta 的文本到纹理生成器 Meta 3D TextureGen。推理时间约为 20 秒。用例 2:生成三维(再)纹理给定一个未纹理化的三维网格和一个描述其所需外观的提示。阶段 2 还可以从头开始为该三维素材生成纹理(网格可以是以前生成的,也可以是艺术家创建的)。推理时间约为 20 秒。您可以在这里阅读 Meta 3D Gen 的技术论文全文。Meta 公司还发表了技术论文,介绍他们用于高质量三维模型生成和基于文本提示的纹理生成的方法,这些方法是 Meta 3D Gen 系统的基础。 ... PC版: 手机版:

封面图片

Stability AI 发布 Stable Video 3D

Stability AI 发布 Stable Video 3D AI 创业公司 Stability AI 发布了 Stable Video 3D,输入一个对象的静态照片生成该对象的 3D 模型。Stable Video 3D 有两个版本:SV3D_u 和 SV3D_p,其中 SV3D_u 输入单幅图像生成轨道视频,无需相机调节;SV3D_p 组合了单幅图像和轨道视图,允许沿着指定相机路径创建 3D 视频。Stable Video 3D 的商业使用需要付费,非商业使用可在上下载模型权重(9.37GB)。来源 ,, 频道:@kejiqu 群组:@kejiquchat

封面图片

Stability AI 发布单幅图像生成 3D 对象的 Stable Zero123

Stability AI 发布单幅图像生成 3D 对象的 Stable Zero123 Stability AI 发布了能根据单幅图像生成对象各个角度视图的模型 Stable Zero123。Stable Zero123 是基于 Stable Diffusion 1.5,生成一个视图消耗的内存与 Stable Diffusion 1.5 相同,但如果要生成 3D 视图需要更多时间和更多内存,建议 24GB。Stable Zero123 目前只支持研究目的的非商业使用。代码和权重发布在上。来源 , 频道:@kejiqu 群组:@kejiquchat

封面图片

首创AI裸眼3D手机 中兴远航3D开售 售价1499元

首创AI裸眼3D手机 中兴远航3D开售 售价1499元 中兴远航3D配有专属物理按键,一键即可进入指定 App(如咪咕视频),且拥有3D观影区。AI方面,该机支持AI智慧语音、AI智慧翻译、AI魔法消除等功能。核心配置上,中兴远航3D采用6.58英寸水滴屏,2408*1080分辨率,支持120Hz刷新率和240Hz触控采样率,后置5000万像素AI双摄。该机搭载展锐T760 5G处理器,采用6nm工艺,最高主频2.2GHz,支持SA/NSA双模5G,内置4500mAh电池,支持33W快充。 ... PC版: 手机版:

封面图片

通过人工智能,利用眼球中反射出来的图像,进行 3D 场景重建。#AI 来自:雷锋 频道:@kejiqu 群组:@kejiquc

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人