OpenAI 的 Sora 首次受托制作音乐视频

OpenAI 的 Sora 首次受托制作音乐视频 如果你想制作一段令人瞠目的飞越视频,就像几年前 JayBird Films 的病毒式一镜到底宣传片那样,过程中可能需要一名熟练的无人机驾驶员、一架性能超强的无人机和相当多的后期制作知识。但那是在 OpenAI 于今年早些时候发布 Sora 文字视频模型之前。我们最初看到的是由文字提示生成的令人惊叹的视频片段,一个月后又看到了一些由才华横溢的创意人士制作的短片。其中一个短片最近引起了一些争议,因为总部位于多伦多的制作公司 shy kids 透露,其出色的《Air Head》短片实际上包含了大量的后期制作工作。上个月,电子音乐家奥古斯特-坎普(August Kamp)的歌曲《世界重量》(Worldweight)就使用了 Sora,为影片提供了三维移动图像。现在,来自洛杉矶的导演保罗-特里罗(Paul Trillo)将人工智能平台用于其首部官方音乐视频的拍摄。据说,这段视频实现了特里罗酝酿了 10 年的想法,是 3 年前为 The Shins 的歌曲《The Great Divide》制作的 3D 动画音乐视频的改进版。现在,虚拟摄像机通过场景向前移动,而不是向后拉,为歌手兼作曲家 Ernest Weatherly Greene Jr. 完成"最难的部分"。这段四分钟的视频是由 55 个 Sora 片段组成的一系列飞越场景,这些片段由文本输入生成,并在 Adobe Premiere Pro 软件中拼接在一起,只进行了"非常细微的润色"。由人工智能生成的年轻角色和地点在屏幕上只是一闪而过,目前还不清楚诸如奇怪的身体角度、外星人的头、奇怪的生涩动作和明显的镜头技巧等是否是预期效果的一部分,或者仅仅是渲染错误。无论如何,这都是一个很酷的曲子的很酷的视频。 ... PC版: 手机版:

相关推荐

封面图片

首支由 OpenAI Sora 生成的 MV

首支由 OpenAI Sora 生成的 MV 就在五一期间,OpenAI 钦定的 Sora 早鸟用户 编剧兼导演,重磅发布了「首支利用 OpenAI Sora 制作的官方 MV」! 这段 4 分钟的视频是为独立音乐家 Washed Out(本名 Ernest Weatherly Greene Jr.)及其新单曲「The Hardest Part」量身订做的。概括来说,它是由一段连续快速变焦镜头序列组成,并且通过巧妙地拼接将不同的场景紧密联系在一起。 而更震撼的是,Paul Trillo 为了制作这个视频总共用 Sora 生成了多达 700 个片段,然后从中精挑细选了 55 个,并在 Adobe Premiere 中进行拼接。最终,大约用了 6 周的时间,这支 MV 便制作完成了。来源 , 频道:@kejiqu 群组:@kejiquchat

封面图片

OpenAI的Sora视频生成模型也能用来渲染游戏

OpenAI的Sora视频生成模型也能用来渲染视频游戏 这篇题为《作为世界模拟器的视频生成模型》(Video generation models as world simulators)的论文由多位 OpenAI 研究人员共同撰写,揭开了 Sora 架构关键方面的神秘面纱例如,Sora 可以生成任意分辨率和长宽比(最高 1080p)的视频。根据论文所述,Sora 能够执行一系列图像和视频编辑任务,从创建循环视频、向前或向后延伸视频到更改现有视频的背景。但最吸引笔者的还是 Sora"模拟数字世界"的能力,OpenAI 的合著者如是说。在一次实验中,OpenAI 将 Sora 放到 Minecraft 上,让它在控制玩家的同时渲染世界及其动态(包括物理)。Sora 在 Minecraft 中控制一名玩家,并渲染视频游戏世界,请注意,颗粒感是由视频到 GIF 的转换工具造成的,而不是 Sora。图片来源:OpenAIOpenAI那么,Sora 是如何做到这一点的呢?正如 NVIDIA 高级研究员 Jim Fan(通过 Quartz)所说,与其说 Sora 是一个创意引擎,不如说它是一个"数据驱动的物理引擎"。它不仅能生成单张照片或视频,还能确定环境中每个物体的物理特性,并根据这些计算结果渲染照片或视频(或交互式 3D 世界,视情况而定)。合著者写道:"这些功能表明,继续扩展视频模型是开发物理和数字世界以及其中的物体、动物和人的高能力模拟器的一条大有可为的途径。"现在,Sora在视频游戏领域也有其通常的局限性。该模型无法准确模拟玻璃碎裂等基本互动的物理过程。即使在可以建模的互动中,Sora 也经常出现不一致的情况,例如在渲染一个人吃汉堡时,却无法渲染汉堡上的咬痕。不过,如果我没看错的话,Sora 似乎可以为更逼真(甚至可能是逼真)的程序生成游戏铺平道路。这既令人兴奋,又令人恐惧(考虑到Deepfake的影响)这也许就是为什么 OpenAI 选择暂时将 Sora 关在一个非常有限的访问程序后面的原因。相关文章:OpenAI 推出文本到视频人工智能模型 SoraOpenAI首个视频生成模型发布 能生成长达1分钟的高清视频 ... PC版: 手机版:

封面图片

下午察:Sora激起中国科技圈焦虑?

下午察:Sora激起中国科技圈焦虑? 继生成式人工智能(AI)ChatGPT之后,美国AI巨头OpenAI在2月16日凌晨继续震动四方,凭借更逼真的视频生成技术再次出圈。在影视业人士担忧这项AI技术可能让自己失业的同时,中美科技博弈的紧迫感也在升级。 Sora是OpenAI开发的首个AI视频生成模型,只要输入内容、提示词或图片,Sora就能在一秒内生成长达一分钟的高保真视频。 没有导演、专业演员的参与,Sora的视频却能生成出高度细致的背景、复杂的多角度镜头及富有情感的角色。以往视频制作的选址、选演员、分镜构图,架设机位、后期制作等复杂流程,对Sora而言都只是一句话的功夫。 2024年2月20日 8:50 PM

封面图片

OpenAI Sora让创作者们工作轻松 他们还相信自己不会轻易被取代

OpenAI Sora让创作者们工作轻松 他们还相信自己不会轻易被取代 Sora以其独特的文本到视频转换技术而闻名,能够生成长达一分钟的高质量视频,其概念验证视频一经发布便在网络上引发了广泛的关注。然而,对于好莱坞的某些从业者来说,这种技术的出现无疑带来了某种程度的威胁。资深电影制作人泰勒·佩里(Tyler Perry)对Sora的出色表现印象深刻,但同时也感到一丝忧虑。他甚至因此暂停了原本计划投入8亿美元的工作室扩建计划,并呼吁好莱坞的工作人员团结起来,共同应对人工智能带来的挑战。尽管Sora尚未正式向公众发布,但已经有许多创意领域的工作者开始尝试使用它。他们纷纷表示,这款工具不仅让他们的工作更轻松,也没有让他们感觉自己可以被替代。相反,Sora帮助他们更加清晰地传达抽象的概念,激发了他们以新的方式将想法可视化的灵感,并且在一定程度上降低了生产成本。不过,他们也强调,目前的Sora仍然需要人类的监督和指导。品牌广告顾问夏洛特·班扬(Charlotte Bunyan)是参与测试的人员之一。她通过为一家“知名超市”制作广告来体验Sora的功能,并表示这款工具“有可能”成为她未来工作的得力助手。班扬参与了英国《金融时报》组织的一次对比测试,其中涉及了Sora与竞争对手Runway和Pika,后两家公司都声称只需几个提示词就能生成人工智能视频。在测试中,班扬直接为Pika和Runway提供了一个提示,而OpenAI则为Sora提供了经过修改的提示。班扬表示,相较于其他工具,Sora对提示内容的呈现更加“忠实”。不过,这三种工具都“能加快我们交流创意想法的方式,并使其更加具体化。”但她也提到,无论使用哪个工具,通过编辑工具生成的内容似乎都还需要加入一个“人类层面”的处理。其他人则指出,Sora在一致性方面的不足可能会带来新的创作机会。据报道,独立艺术家Washed Out的新歌《The Hardest Part》的MV是与Sora合作制作的最长作品。这段视频的导演保罗·特里罗(Paul Trillo)在X平台上的帖子中表达了他对Sora生成视频的独特感受。他“沉醉于幻觉、奇异的细节、梦幻般的运动逻辑、记忆的扭曲镜像,以及Sora和人工智能所独有的超现实品质中”。据悉,这段视频是由Sora根据详细的提示生成的55个片段拼接而成。但这些片段的连贯性并不总是完美无缺。在视频中,一对夫妇和他们的孩子的形象在不同片段中有所出入。然而,特里洛选择忽略这些差异,从某种意义上说,这些差异反而增强了视频的梦幻性质。他认为Sora能够补充创意过程,但不应成为主导工具。特里洛补充说:“你必须明白该在哪些方面与Sora较劲。在处理这件事时,你不得不放弃一点自由意志,你不得不接受它所带来的混乱和不确定性。” ... PC版: 手机版:

封面图片

OpenAI Sora通过文字生成的视频

OpenAI Sora通过文字生成的视频 仔细看甚至可以看到猫在不同光线条件下的瞳孔变化 HHPoker德州扑克 | 菲律宾品茶修车 OK区块链娱乐城 | 佳运官方频道 广告投放联系

封面图片

生数科技联合清华发布视频大模型Vidu 全面对标Sora

生数科技联合清华发布视频大模型Vidu 全面对标Sora 据介绍,Vidu不仅能够模拟真实物理世界,还拥有丰富想象力,具备多镜头生成、时空一致性高等特点。Vidu是自Sora发布之后全球率先取得重大突破的视频大模型,性能全面对标国际顶尖水平,并在加速迭代提升中。与Sora一致,Vidu能够根据提供的文本描述直接生成长达16秒的高质量视频。值得一提的是,短片中的片段都是从头到尾连续生成,没有明显的插帧现象,从这种“一镜到底”的表现能够推测出,Vidu采用的是“一步到位”的生成方式,与Sora一样,文本到视频的转换是直接且连续的,在底层算法实现上是基于单一模型完全端到端生成,不涉及中间的插帧和其他多步骤的处理。 ... PC版: 手机版:

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人