100镜实测新版即梦AI视频3.0,我称之为性价比拉满听懂人话的全能选手!

即梦怎么悄悄咪咪干大事啊!

昨晚不声不响的上线了新视频模型 Seedance 1.0 的内测,

没错,即梦进阶到3.0版本了。

熟悉我的老朋友们都知道,我从做AI视频开始,使用即梦频率之高,那这次新版本出来肯定少不了一通狂测,先给大家放几个效果:

非常出乎我意料的,好!而且我玩了一晚上,是越测越有,简单总结就是:

  • T0级的提示语遵循能力

  • 支持多种运镜、切镜

  • 80%以上的人脸还原和画面补足

  • 以及提升了不止一个level的文生视频审美能力

目前生成 5s 镜头10积分(1块),10s 镜头20积分(2块),这性价比杠杠的。

话不多说,还是分能力给大家一个一个看看效果,Here we go!


 01|T0级提示语遵循 

这一趴我要放在第一个讲,因为下面几种效果做的好都依靠模型对于提示语的理解能力。

这次我们分成:连续动作、运镜变化、切换镜头。三个场景一起来看看。

连续动作

看提示语遵循的话,首先要看的就是单一长镜头中,模型能否对于提示语描述的动作或者表情的连续变化完整执行。

那我们就来个,单镜头中人物的时序动作变化:

提示语:一位年轻女子向前慢跑几步,然后停下脚步,然后左右张望,然后迅速蹲下,最后微笑着起身向前慢慢跑,镜头跟随女子运动

慢跑 -> 停下 -> 左右张望 -> 蹲下 -> 微笑起身 -> 向前慢跑,这拆分下来有6个动作之多,Seedance 1.0 都做到了,而且动作连续,没有什么不自然的地方,整个画面都很和谐。

再来一个动物的连续动作测试一下:

提示语:一只猴子从树枝上敏捷的跳到地上,然后好奇地捡起地上一个物体左看右看,然后猴子把这个物体举过头顶,最后猴子将物体丢下跑走了,镜头跟随猴子快速移动。

跳到地上 -> 捡起东西 -> 左看右看 -> 举过头顶 -> 丢下东西 -> 跑走,同样也是6个动作,不管是猴子的动作还是神态都很自然,除了石头突然一块变成两块之外,这个流畅度快要分不出AI了。

最后我们来测个人物的表情变化:

提示语:一个男人先是严肃的皱眉,然后突然睁大眼睛露出震惊的表情,然后开始大笑,然后好像突然想起什么开始变得痛苦,最后抱住头痛哭

对比提示语来看,可以看到 Seedance 1.0 把每一个表情都执行出来了,几乎没什么压力,情绪表达都很到位。

运镜变化

OK,这一趴我们来看单一镜头中的运镜变化,要知道在AI视频生成中,想要控制镜头的运动是一件非常难的事情,尤其想要在一个镜头中完成不同的运镜方式,更是难上加难。

那我们看看下面这两个case:

提示语:快速推进聚焦到红玫瑰上的晶莹剔透的露珠特写,然后镜头快速360度环绕展示玫瑰,最后拉远到大全景展示整个花园。
提示语:手持晃动视角跟踪奔跑的狗,浅景深仅对焦在狗身上,然后狗狗跑出画面,镜头推进对焦到背景中玩耍的小孩

可以看到单一镜头中,Seedance 1.0 可以完成镜头不同方向的运动,并且根据提示语改变焦点。那就更别说在一个镜头中持续完成一种运镜方式了,不需要完成变化,镜头的张力会更好:

切镜变化

提示语遵循的最大挑战:多个镜头的切换!放在之前,其实一些比较厉害的视频模型对于两个镜头的切换基本能完成个七七八八,但现在,Seedance 1.0 可不止这样!我们直接来看案例。

友情提示:这些镜头我没有剪辑过,只是给了一张图和提示语生成出来的。

提示语:第一个镜头:推进展示食材,第二个镜头:硬切到一个人的手部切菜特写,第三个镜头:切换到一个人炒番茄炒蛋,第四个镜头:盘子中炒好的番茄炒蛋
提示语:第一个镜头:男性角色侧脸在说话,第二个镜头:穿着白色侠客裙子的玄幻风格女性角色左侧脸在说话,第三个镜头:水面上有几片花瓣飘落,第四个镜头:两个人在说话的大远景
提示语:第一个镜头:镜头推进展示女生有点害羞的表情,第二个镜头:二次元动漫风格,一个穿着西装校服的短发帅气男生向前走了一步,侧面拍摄男生,第三个镜头:樱花树上樱花瓣被一阵风吹的飘散的特写,第四个镜头:两个人面对面站在樱花树下的极具氛围感的大远景

强到我没话说了!每一个都是我只给出了首图和提示语,然后 Seedance 1.0 就给了我这些牛xplus的效果,虽然切菜还有点bug,但是无论是哪个场景,画面的一致性保持的都超级好,甚至凭空造出来的角色都是在这个风格中,特别是那个3D玄幻动画中的女生角色,凭空造啊,还这么好看!


 02|人脸还原和画面补足 

看完上面这些镜头,我要把人脸还原和画面补足单独拎出来着重展示一下。因为这一部分也是特别特别惊艳我的,每次生成完了之后,我都忍不住说“我x,牛皮”的程度。

人脸还原

话不多说了,直接看case:

单一镜头中人脸有动作后的稳定:


切换了镜头重新回到这个角色,人脸的保持程度:


测试多了会发现,真人角色有时候还原的效果还是稍微差一点,有瑕疵但足够了,不仔细看或者不是专业级别的使用完全够了。重要的是,按照这个发展,这角色一致性100%岂不是指日可待了吗……

画面补足

再来给大家看几个风格化非常强,但是即梦 Seedance 1.0 可以几乎完美的延续原视频风格完成画面没有的元素补足的case:




03|文生视频审美

在测试中,我还发现,即梦 Seedance 1.0 对于文生视频的基础审美能力提升了很多,能够识别不同风格的提示词,画面质感提升很大,整个画面生成的很漂亮:

提示语:乐高动画风格,一只小人在造房子
提示语:皮克斯3D动画风格,第一个镜头:一个小女孩和一只小狗在客厅奔跑玩耍,第二个镜头:小女孩开心的表情特写,第三个镜头:小狗开心的表情特写
提示语:宫崎骏动漫风格,第一个镜头:侧面拍摄一个少女在热气球中开心的挥了一下手,第二个镜头:展示热气球下燃烧的火焰,第三个镜头:镜头切换到远景展示天空的热气球

也就是说,即便我们没有提前用图像模型固定好风格,即梦现在也能够给你一个类似风格视频,这对于一些单个镜头、或者一些比较常见的风格镜头来说,现在可以省下生图这一环了。


 写在最后 

我用即梦生成视频时,

看到“造梦中”这几个字会不自觉地感慨,

即梦好像一直为了“梦”不断进步着。

而且它渐渐从那个仅仅依靠视频生成能力,

帮助一大帮创作者实现第一次造梦的 即梦 1.2,

走到现在成为拥有 

支持稳定中文的即梦3.0生图、一站式修图改图智能画布、数字人对口型大师版Omnihuman、T0级提示语遵循的Seedance 1.0的

全能王。


不多说了,

就让我们一起,

即刻造梦吧。


@ 作者 / 阿汤 @ 动手学AI知识库 / learnprompt.pro


(文:卡尔的AI沃茨)

发表评论

×

下载每时AI手机APP

 

和大家一起交流AI最新资讯!

立即前往