Sora 生成的 27 秒的视频,提示词理解也很好,右下角那个水印的动效非常漂亮。

Sora 生成的 27 秒的视频,提示词理解也很好,右下角那个水印的动效非常漂亮。 提示:画面中,一只橙白相间的虎斑猫在茂密的花园里欢快地穿行,仿佛在追逐着什么。它的眼神中充满了喜悦,小跑着,一边观察着周围的树枝、花朵和叶子。它穿梭在狭窄的小径上,穿行于繁茂的植被间。整个场景从贴近地面的角度拍摄,紧跟着这只猫,营造出一种低角度但亲密的视觉效果。画面呈现出电影级的温暖色调和细腻的质感,透过树叶和植物间隙洒下的斑驳阳光与猫的橙色毛皮形成了迷人的对比。每个画面都清晰锐利,具有浅景深的效果,让观众感觉仿佛置身其间。

相关推荐

封面图片

: Sora 生成的 27 秒的视频,提示词理解也很好,右下角那个水印的动效非常漂亮。…

封面图片

一套非常简单的提示词效果却意外的好,可以生成八九十年代的电影质感照片,而且里面的人物装扮也非常复古和到位,MJ V6 真是太强大

一套非常简单的提示词效果却意外的好,可以生成八九十年代的电影质感照片,而且里面的人物装扮也非常复古和到位,MJ V6 真是太强大了,对画面氛围装扮和照片质感的把握都非常好。 把第一个逗号前面的提示词换掉就行,可以是中国道士,可以是刀客,也可以是将军女侠。 提示词: Chinese swordsman wearing robe and hat, DVD screengrab, 1980s fantasy cinema, ar 9:16 style raw

封面图片

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘

周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘 他认为,对比Pika和Runway是做不出这样效果的。Pika和Runbway实际上是基于图形图像本身的操作来进行生成。只是形成一种比较简单的计算机动画的效果。周鸿祎说:“即使是用常规呢计算机CG电影工业特效来看这三个画面,那也会非常难做,但是到了Sora这里,这些细节都会变得非常简单,只要给出一些文字的提示要求,就能逼真描绘出来”。他认为,Sora是没有做3D建模的。如果Sora也只是用3D建模再进行渲染,那么这和传统的电影工业走的是一样的路,这样就不具备颠覆性和革命性了。周鸿祎猜测Sora做到如此效果有三点原因:1、Sora模拟了人类观察、描绘、表现世界的方法。如果人类画师用笔画出来这三个场景,人类的大脑里不需要3D建模,因为人类对世界有基本认知。人类可以随意想象出自己要做的事,可以控制自己所想。2、Sora在学习的过程中,用了很多视频、电影的内容来作为训练输入。当输入一些画面,不仅要解读出画面的元素,还要解读出一些物理定律。openAI的论文中曾提到recaptioning技术,意思是对每一帧画面都能够用文字来描述。这点也正符合人类认知世界的方法。3、openAI产生了很多3D内容。不排除它用现在游戏引擎做了很多实时3D模型的渲染,再利用这些3D模型把更多的物理知识训练给Sora。周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世界的理解,是从文字进入图像,再从图像展示对这个世界3D模型的理解。 ... PC版: 手机版:

封面图片

这个研究有点强的,我们可能获得了另外一种增强Stable Diffusion控制的方法,它允许你使用富文本书写提示词。

这个研究有点强的,我们可能获得了另外一种增强Stable Diffusion控制的方法,它允许你使用富文本书写提示词。 比如指定某个提示词的颜色,例如提示词中有长发这个单词,然后你把长发的文字颜色改成了粉色,那么生成图像的头发颜色就会变成粉色。不只是那种粗略的粉色哦,是带有精确色值的。 下面我们分别来看一下它支持的富文本格式和生效方式: 首先你可以通过字体颜色控制生成对象的颜色,比如下面这张图Hair头发的字体颜色被改成粉色的时候生成图像的头发颜色就会变为粉色。 然后你可以改变对应提示词单词的字体来赋予图像对应的风格,这个就有点意识流了,全看模型对这个字体的感知,比如下面这这张图的guitar吉他的字体如果是比较放松的就会生成彩色的吉他,如果是古朴的手写体吉他就比较有年代感。 最后你可以给对应提示词的单词增加注释对其进行补充说明,比如下方这个例子中的cat被加上了“一只戴着墨镜、脖子上围着头巾的猫。”这样的注释在不影响整体画面的情况下猫这个主体准确的生成了注释的内容。你也可以给多个单词都加上这样的注释。 下面看一下这个论文大概的原理: 简单来说他们用了一种方法获得了每一个提示词单词对生成图像影响区域的映射,然后用将富文本的属性拿出来单独针对每个影响的提示词单词的区域再进行降噪操作从而修改扩散模型第一次生成的图像。 好了介绍到这里就结束了,希望早日有大神可以将这种方法集成到SD里面,或者开发出更多地富文本格式。 这里是论文的介绍: 这里你可以试玩这个控制方法:

封面图片

震撼!牛逼!OpenAI 发布了 Sora,一种文字生成视频的技术,从演示看,效果还是相当不错的。

震撼!牛逼!OpenAI 发布了 Sora,一种文字生成视频的技术,从演示看,效果还是相当不错的。 Sora 的强大之处在于其能够根据文本描述,生成长达 60 秒的视频,其中包含精细复杂的场景、生动的角色表情以及复杂的镜头运动。 目前,Sora已对网络安全的红队成员开放,以评估其可能存在的风险或潜在伤害。同时,OpenAI 也邀请了视觉艺术家、设计师和电影制作人使用Sora,收集他们的反馈,以使模型更好地服务于创意行业。 Sora能够创造出包含多个角色、特定动作类型以及与主题和背景相符的详细场景。这款模型不仅能理解用户的指令,还能洞察这些元素在现实世界中的表现。 Sora对语言有着深刻的理解,能够精准地捕捉到用户的需求,并创造出充满生命力、情感丰富的角色。此外,Sora还能在同一视频中创造出多个画面,同时保持角色和视觉风格的一致性。 当然,Sora还不是完美的。比如在模拟复杂场景的物理效应,以及理解某些特定因果关系时,它可能会遇到难题。举个例子,视频中的人物可能会咬一口饼干,但饼干上可能看不到明显的咬痕。 在处理空间细节,比如分辨左右时,Sora也可能会出现混淆;在精确描述一段时间内发生的事件,如特定的摄影机移动轨迹时,也可能显得力不从心。 - 视频二提示词:一位时髦的女士穿行在东京的街头,街道充满了温暖的霓虹灯光和动感的城市标志。她穿着一件黑色皮夹克,一条长红裙和黑色靴子,手拿一个黑色手提包。她戴着太阳镜和红色口红。她走路既自信又随意。街道潮湿且能反射,创造出彩色灯光的镜面效果。许多行人来来往往。 产品地址:

封面图片

AIGC变天?OpenAI推出文生视频模型Sora 官方合集来了

AIGC变天?OpenAI推出文生视频模型Sora 官方视频合集来了 Prompt:  “Beautiful, snowy Tokyo city is bustling. The camera moves through the  bustling city street, following several people enjoying the beautiful  snowy weather and shopping at nearby stalls. Gorgeous sakura petals are  flying through the wind along with snowflakes.”美丽雪景中的东京城繁忙喧嚣。摄像机穿过繁忙的街道,跟随几个人享受美丽的雪景和在附近摊位购物。美丽的樱花瓣随风飘落,与雪花一起飞舞。Prompt:  “Several giant wooly mammoths approach treading through a snowy meadow,  their long wooly fur lightly blows in the wind as they walk, snow  covered trees and dramatic snow capped mountains in the distance, mid  afternoon light with wispy clouds and a sun high in the distance creates  a warm glow, the low camera view is stunning capturing the large furry  mammal with beautiful photography, depth of field.”几头巨大的羊毛猛犸象踏过雪地草甸,它们长长的羊毛皮毛在风中轻轻摆动,远处覆盖着雪的树木和戏剧性的雪顶山脉,午后的光线透过稀疏的云层和远处高悬的太阳创造出温暖的光芒,低角度的摄像机视角令人惊叹,以美妙的摄影技术捕捉这大型毛茸茸的哺乳动物,景深效果。Prompt:  “A movie trailer featuring the adventures of the 30 year old space man  wearing a red wool knitted motorcycle helmet, blue sky, salt desert,  cinematic style, shot on 35mm film, vivid colors.”一部电影预告,展现一个穿着红色羊毛编织摩托车头盔的30岁太空人的冒险,蓝天、盐沼、电影风格,使用35mm胶片拍摄,色彩鲜艳。Prompt: “A gorgeously rendered papercraft world of a coral reef, rife with colorful fish and sea creatures.”一个华丽渲染的纸艺世界珊瑚礁,充满了五彩缤纷的鱼类和海洋生物。Prompt:  “Animated scene features a close-up of a short fluffy monster kneeling  beside a melting red candle. the art style is 3d and realistic, with a  focus on lighting and texture. the mood of the painting is one of wonder  and curiosity, as the monster gazes at the flame with wide eyes and  open mouth. its pose and expression convey a sense of innocence and  playfulness, as if it is exploring the world around it for the first  time. the use of warm colors and dramatic lighting further enhances the  cozy atmosphere of the image.”动画场景特写一个短小毛茸茸的怪物跪在一根融化的红蜡烛旁。艺术风格为3D且逼真,专注于光照和质感。画面氛围充满了惊奇和好奇,当怪物睁大眼睛,张开嘴巴凝视着火焰时。它的姿势和表情传达出一种纯真和顽皮的感觉,仿佛它是第一次探索周围的世界。温暖的色彩和戏剧性的光照进一步增强了画面的舒适氛围。Prompt:  “A stylish woman walks down a Tokyo street filled with warm glowing  neon and animated city signage. she wears a black leather jacket, a long  red dress, and black boots, and carries a black purse. she wears  sunglasses and red lipstick. she walks confidently and casually. the  street is damp and reflective, creating a mirror effect of the colorful  lights. many pedestrians walk about.”一位时尚女士走在东京街头,街道充满了温暖的霓虹灯和动态的城市标志。她穿着黑色皮夹克,一条长红裙和黑色靴子,并携带一个黑色手提包。她戴着太阳镜和红色口红,自信而随意地行走。街道潮湿且能反射,创造出色彩斑斓灯光的镜面效果。许多行人来往。Prompt: A bicycle race on ocean with different animals as athletes riding the bicycles with drone camera view一场在海面上的自行车比赛,不同的动物作为运动员骑着自行车,无人机摄像机视角。Prompt:  A instructional cooking session for homemade gnocchi hosted by a  grandmother social media influencer set in a rustic Tuscan country  kitchen with cinematic lighting由一位祖母社交媒体影响者主持的家庭自制意大利面食教学课程,设置在具有电影级照明的乡村托斯卡纳厨房中。Prompt: Two golden retrievers podcasting on top of a mountain两只金毛寻回犬在山顶上播客。Prompt: a futuristic drone race at sunset on the planet mars在火星上日落时分的未来派无人机比赛。纽约时报相关报道:OpenAI 公布新技术Sora,能即时生成令人瞩目的视频OpenAI,   一家位于旧金山的创业公司,最近推出了一项名为Sora的新技术。这项技术能够基于简短描述即时生成视频,展示了如同从好莱坞电影中提取出来的画面。Sora的演示视频包括毛茸茸的猛犸象在雪地中奔跑、怪物凝视融化的蜡烛,以及仿佛通过飞跃城市拍摄的东京街景等短片。作为ChatGPT聊天机器人和静态图像生成器DALL-E的背后公司,OpenAI正与包括Runway和大型科技巨头如Google及Meta(Facebook和Instagram的母公司)等在内的多家公司竞争,以改进这种即时视频生成技术。这项技术不仅可以加速经验丰富的电影制作人的工作,也可能完全取代经验较少的数字艺术家。然而,这项技术也可能成为在线虚假信息的快速且低成本的制作方式,使得网络上区分真实内容变得更加困难。华盛顿大学专门研究人工智能的教授Oren Etzioni表示:“我非常担心这类技术会影响一些竞争激烈的选举。”OpenAI将其新系统命名为Sora,取自日语中“天空”的意思,象征着无限的创造潜力。公司目前还未向公众发布Sora,因为它还在努力了解系统的潜在危险。相反,OpenAI正在与一小群学者和其他外部研究人员共享这项技术,这些人将对其进行“红队”测试,寻找可能的滥用方式。OpenAI正在对系统生成的视频加上水印,以标识这些视频是由AI生成的。但该公司承认这些水印可以被移除,且可能难以被察觉。Sora生成视频的方式是响应简短的描述,尽管视频可能令人印象深刻,但并不总是完美的,可能会包含奇怪和不合逻辑的图像。例如,该系统最近生成了一个人正在吃饼干的视频但饼干从未变小。随着DALL-E、Midjourney等静态图像生成器在过去几年的快速改进,它们现在生成的图像几乎与照片无法区分。这使得在线识别虚假信息变得更加困难,许多数字艺术家抱怨说,这让他们更难找到工作。密歇根州的电影概念艺术家Reid Southen表示:“当Midjourney在2022年首次推出时,我们都笑称‘哦,那很可爱’。现在,人们因为Midjourney而失去工作。” ... PC版: 手机版:

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人