之前把普通照片变成二次元画风的各种AI,大家或多或少都理解过:

又或者是让AI创造一个真实的美女:

不过这些都是静态的图片,有些人则在思考能不能让AI搞出点电影来看。

近期外国有名视频殊效团队Corridor就整了一个狠活儿,AI在他们手中要创作的不再是一幅画,而是要让画面组成一个完成的动画
例如下面这个片段,实在便是AI照着真人绘制的:

特效大年夜神用真人视频一键生成动画动画师要失落业了

动画中两位王子进行明晰一场惨烈的决斗,而办法竟然是「剪刀石头布」!
虽然沙雕,但这画面确实够热血的:

看不出来是AI做的?可以比拟一下真人镜头,切实其实完美同步,无缝切换:

画面干净,表情生动,没有鬼畜,乃至画风还有点经典。
就彷佛是有一个动画团队用画笔照着现实中的人物绘制了一幅幅画面。
但实在Corridor仅仅用到了四五个人,而且他们压根也都不会制作动画。

可以想象一下,AI先是让你能从0根本变成画师,现在又有可能变成动画制作者,听起来创作更加轻松自由,这就有点科幻了。

以是,他们到底是怎么做的?

全体步骤大略来说,便是先让真人演一下,然后让AI把真人视频弄成动画版本。
当然这个过程提及来随意马虎,做起来繁芜。

他们利用的工具是我们之前先容过的Stable Diffusion,关键词给到AI,根据你添加的模板,它能帮忙天生各种风格的画面。

而想做视频首先要办理的问题,便是画面的不稳定性。

由于每一帧的画面不同,AI天生的画面也会有明显差异。
例如之前网友制作的「塞尔达风格侏罗纪公园」,作品已经相称流畅,但依然可以看出人物本身都在飞速变革,发型不断改变。

以是Corridor先考试测验在几帧内固定了画面风格,以此来让画面大体稳定住,不要变动得太离谱。

但此时人物风格依然在不断转变,比如每张图中,角色的眼睛大小、画风都会改换,乃至有时候戴眼镜有时候不戴。

为理解决这个问题,就要用到一个固定的模型,统一画风,让AI别想太多。

于是他们用《吸血鬼猎人D》的画面对AI进行演习,利用的截图包括各种面部特写、肢体、身体等等:

这样一来,天生的画面都因此这部动画为根本,眼睛也就不会忽大忽小了。

同时还要办理一个问题,那便是脸部的细节依然不稳定,而处理这个问题的方法,便是同时演习一个演员自己的真人模型。
须要演员穿上戏服,然后多角度猖獗拍照,给AI制作素材。

制作团队不仅要给AI锁定了动画的风格,同时也要锁定演员的样貌,大幅度减少天生的图片的随机性。

经由演习的AI也可以天生演员的图像,只不过手指头偶尔还是残缺的。

接着还须要连续演习,用演员的照片天生动画形象,不断迭代,终极才有了比较满意且稳定的动画形象。

在多重演习的加持下,动画的效果也就变得空想了一些,画面的统一性基本稳定下来了:

再用上视频殊效技能减少闪烁,画面由此变得更加惊艳,人物的感情饱满,动作连贯而且流畅:

再加一些漫画殊效,你说这是某部动画里剪辑出来的片段都没问题。

接下来他们要给自己的动画设计故事情节与背景:「国王去世了,两个王子要用石头剪刀布争夺王位」,这剧情听着都像是AI写的。

技能有了,故事脚本有了,接下来开始正式制作。
例如开始配音,虽然没有画面,但几位老哥还是吼到声嘶力竭。

之后便是从网上搞一下服装,两个主演穿上就去拍戏了。

真人视频拍好就交给AI处理画面,同时加入各种细节对画面进行调度。

于是现实中的各种演出,就这样被AI一点点给动画化了。

把绿幕抠掉,人物素材就基本完成。

接着还须要制作背景。
于是他们直接用虚幻引擎中的素材,从素材中探求镜头图片:

然后把图喂给AI,再天生一大堆的背景图。

接下来便是对视频的整合与进一步处理,包括镜头、衣服、光芒的变革等等。

例如让背景平移,这样镜头看起来像是在旋转,动态感就有了:

人物与背景相结合,末了输出成动画:

在动画中,乃至一些微表情也能对照真人进行还原,眼角的跳动,嘴角的抽搐,真人怎么做,AI就怎么画:

石头剪刀布搞得像是放出了杀招一样,看着又尬又好玩:

这样的制作,已经完备分开AI画图的觉得了。

这部动画在推出后目前已经有了超过200万的播放量,并引发了激烈谈论。

大多数人的不雅观点再次认为,AI将引发新一轮的革命,要失落业的觉得笼罩了不少网友。

但也有人指出,AI的本钱并不比画师的事情量小。

首先,Corridor是一个极为专业的殊效团队,每个人都能力出众。
以前恶搞波士顿动力机器人反杀人类的视频就出自他们之手,当时很多人对此都真假难分。

以是与其说是AI天生得好,不如说他们本身就拍得好,花了两个月才有了动画的精彩演出,普通人想要这样操作还有点迢遥。

同时画风也是锁去世的,由于他们的动画是根据真人来制作的,以是画风也贴近写实,如果画风再夸年夜一点效果可能又会变得不理想。

末了辩论的便是版权问题,不少画师还是很抵触自己的作品被喂给AI的。

但想要完备分开画师制作动画也不现实,像是这次的制作就还是利用了《吸血鬼猎人D》的画面进行演习,想让AI完备自己绘制还是两个观点。

对此也有人指出,只要工具好用,动画公司会自己搞定版权,末了受伤的只有普通打工人。

话说回来,我还是对AI的发展充满期待。

天生一张图片,改变图片的风格,天生真人,又把真人变成动画,AI的玩法明显越来越多。
过几天说不定语音都不用真人去录制,视频都不再用真人去拍摄。

按照这个进化趋势,往后把一部电视剧喂给AI,说不定也能轻松输出一部动画版本。
一想到这里,这下不得不期待了。

(文中图片素材来源自网络)