基于深度学习对动漫线稿智能上色,赋能动漫制作可节约30%人力
中国漫画的需求量在不断增加,而动漫制作本钱一贯居高不下。究其缘故原由为动漫制作是一个繁芜且耗时的过程,须要大量事情职员在不同阶段进行协作。
动漫制作过程中,需先创作关键帧草图,接着完成中间动作草图,末了在设计的颜色图表根本上反复为所有线条上色。
在上色部分,须要大量重复事情,例如画师画年夜大好人物风格后,有大量人物形象的相同或相似帧须要上色,而其背景和殊效大多可以复用。若能找到一个自动同等的草图框架着色方法,就可以显著提高动画制作的效率,大大节省开支和人工本钱。
能给漫画线稿上色的AI工具可能并不稀奇了,但目前业内较多是针对静态漫画的上色工具,而动画的上色难度更高,须要保持前后风格的统一性、连贯性,对上色质量、风雅程度了提出更高哀求,静态漫画上色工具难以达到良好效果。
为此,爱奇艺率先推出智能上色引擎,自主研发智能上色引擎,利用深度学习,自动识别漫画内容,进行智能上色,帮助画师将更多韶光花费在创造性的事情内容上,从而提高动漫内容更新频次,助力和赋能动漫及动态漫制作。
目前有一些针对静态漫画的上色工具,在上色时,需人工参与优化局部的上色效果。而爱奇艺智能上色引擎无需人工参与,上色过程也更为便捷。助力带动海内动漫市场生动度,进而引发创作者创作更多新作品。
这紧张是由于爱奇艺智能上色引擎采采取了基于GAN的自研模型。该模型引入了把稳力机制和语义参考信息,使得模型能够理解线稿。同时多种loss相结合,用于像素级别的风雅匹配和上色。此外,该上色引擎还设计了色彩参考模块和风格参考模块,来提高上色图片的色彩丰富度和风格统一性。而且在上色引擎的研究过程中,形成多个子模块,如光影分层模块,同时这些子模块也可以延展运用到其他领域,知足该领域的上色需求。
同时,爱奇艺的智能上色引擎支持两种上色模式,既能依照爱奇艺自研的精美风格上色,也可以根据不同动漫事情室的指定风格进行上色,如写实风、白描风、可爱风等,并可以直接用于工业生产。深度学习须要大量的数据,比如线稿等,通过爱奇艺智能上色引擎获取到的线稿数据,可构建线稿数据库以及不同风格的动漫数据库。
与传统动漫上色流程比较,爱奇艺智能上色引擎供应分层上色的模式,以便于专业画师可以灵巧调度,让上色结果更加贴近画师的创意。
此外,爱奇艺智能上色引擎办理了许多传统上色的问题,可呈现更好的上色质量和更风雅的效果。
· 动画中的动漫人物风格统一:设计风格和色彩参考模块,提高上色图片的色彩丰富度和风格统一度,各帧之间的动漫人物可保持风格统一;
· 衣饰的统一性:引入语义参考模块和把稳力机制,担保上色结果在语义上的准确性, 各帧之间的人物形象可保持语义统一 ,如视频人物可根据特定哀求,保持衣饰统一;
· 人物更加生动:根据详细需求调度网络构造,使模型与数据更匹配,上色质量更高,阴影面积、颜色色调方面与原画的差异更小,且更为风雅,人物画面也更加生动。
爱奇艺智能上色引擎可帮助画师增效数倍,每张线稿只需0.7秒就可完成上色,估量可在动漫制作上色环节中节省约30%的人力。
爱奇艺推出的全新上色模式,优化了动漫行业的事情办法,提高了动漫制作的事情效率,帮助画师将更多的人力投入到了创作类事情中。同时,爱奇艺自主研发的上色风格,还为专业的动漫画师供应了更多的上色思路。