
编辑 | 杨文
好消息!好消息!
ChatGPT 图像生成功能现已对所有用户开放啦!
换句话说,即使是免费用户,也可以用 GPT-4o 生成最近爆火的吉卜力风格图片。
有网友在 X 上发布了自己使用 GPT-4o 和可灵制作的动画视频。

2024 年的压轴抽象热梗:自己↘吓↗自己~
上周五,我们也用 GPT-4o 和可灵,搞了个吉卜力版《甄嬛传》,没想到小火了一把。
截至目前,该视频在全网已有近 30 万播放量。不少网友还在评论区「催更」,要看全集。
我先交个底:全集是没有的,但偶尔整个活儿,还是可以滴。
由于上次时间有限,并未给动画角色对口型,这次我们决定来个进阶版,让吉卜力风格的甄嬛真正开口「说话」。
应网友要求,我们选用的是《甄嬛传》中「皇后杀了皇后」这一经典名场面。
这是原版:
这是我们制作的吉卜力版:
不知合不合各位老铁的口味啊?
接下来,我们就公开整个制作流程。
第一步:截镜头 + GPT-4o 转绘。
与上期操作一样,找到《甄嬛传》原版视频片段,截取其中几个关键镜头。
别看短短 30 多秒的视频,里面涉及不少转场镜头,为了让画面更加连贯丝滑,我们截取了 8 个关键帧。
左右滑动查看更多
然后,将这些画面逐一上传至 GPT-4o,并输入提示词:「请帮我把这张照片转成吉卜力风格」。
上效果:
左右滑动查看更多
有网友表示,GPT-4o 有时会拒绝生成吉卜力风格图片,这当然也有破解之道,我们可以使用「垫图法」绕过系统限制。
只需要上传一张吉卜力风格的图片,再上传想要重绘的图片,输入提示词「用图 1 的视觉风格重绘图 2」。
第二步:图片转视频。
这一步就是将风格化后的图片动起来。
由于原视频片段中包含不少大幅度动作和细微的表情特写,所以一开始我们打算用 Viggle AI 的「Move」功能来生成。
只需将风格化后的图片和对应的原视频片段逐一上传即可。
实测一番发现它确实有两把刷子:

不过也有翻车的时候。比如甄嬛的这个转头动作:

Viggle AI 虽然捕捉到了动作,但对于细节的把握较为粗糙,尤其是甄嬛的头饰,明显出现鬼影、闪烁、变形等问题。

此外,我们也可以使用可灵 1.6 的「图生视频」功能,上传图片,再输入提示词。
为了获得更好的生成效果,在进行提示词描述时,尽量简洁而准确地给出人物、动作和神态,比如「这个女人慢慢转过头去,留下一个背影」、「这个女人悲伤严肃地眨着眼睛」等。
来看看效果:


总之,Viggle AI 和可灵 1.6 各有优缺点。
Viggle AI 可以在不输入提示词的情况下,还原人物动作、神态,但画面经常不够精美,易出现重影、抖动等瑕疵。
可灵 1.6 模型生成效果更稳定,但对提示词的撰写要求较高,这么说吧,提示词质量的高低直接影响最终的生成效果。
因此,我们的建议是二者搭配「食用」,不好描述提示词、且涉及大幅度运动时使用 Viggle AI,想要精美画面时则选用可灵 1.6 模型。
第三步:对口型。
市面上关于对口型的 AI 工具已有不少,比如可灵、即梦以及之前介绍过的 Hedra。
在这个「皇后杀了皇后」的名场面中,有两处安陵容的忏悔需要对口型。为了省事儿,我们直接使用了可灵的对口型功能。
生成相应的视频后,我们点击「对口型」,然后上传对应的音频就 OK。
来看看效果:
当然我们也可以使用即梦和 Hedra。
这是即梦的效果:
这是 Hedra 的效果:
最后,我们把原视频和生成好的素材全部导入剪映中,逐一对应音频后再自动加入字幕即可。
OK!今天的 AI 小课堂就到这儿啦,古德拜!
工具链接:
GPT-4o 链接:https://chatgpt.com/
可灵 AI 链接:https://app.klingai.com/
Viggle AI 链接 :https://viggle.ai/
即梦 AI 链接:https://jimeng.jianying.com/
Hedra 链接:https://www.hedra.com/
剪映
(文:AI好好用)