动画短片《龙门》剧照。 受访者供图
近期，由中国传媒大学动画与数字艺术学院DigiLab实验室制作的动画短片《龙门》，得到第三届巴西Tietê(“铁特”音译)国际电影奖实验短片单元最佳影片提名。该动画短片利用原创天生式人工智能(AIGC)技能，是海内首部全部以AI技能制作的水墨动画短片。
目前，AIGC已经在美术、影视、文学、音乐等创作领域产生广泛影响，动画领域也不例外。面对人工智能的寻衅与机遇，中国传媒大学动画与数字艺术学院院长王雷带领实验室师生团队，从2023年初开始考试测验演习水墨风格的AI视频天生模型。团队通过对开源AIGC技能的二次开拓调度，演习出了拥有自主产权的人工智能模型“墨池”(Inkstone)，经由大量反复试错，开拓完善了水墨插画风格的文生视频、图生视频、视频风格化等AI流程。《龙门》便是运用这些技能完成的试验短片。
产生灵动的质感
水墨动画将中国水墨画引入到动画制片，是最具代表性的中国动画形式，也是动画创作中非常有难度的一个片种。传统水墨动画的制作流程较为繁复，水墨效果也很难以人手掌握。因此，想要做出一个连贯流畅的水墨动态效果并不随意马虎，本钱也较高。直到现在，除了《小蝌蚪找妈妈》《山水情》《牧笛》等经典作品，以水墨创作的动画数量并不多。
“2022年下半年，我开始感到AIGC技能将给水墨动画带来新的发展契机。由于AI能够加速水墨动画的制作过程，一个画面里多达上百个的笔触可以用AI来完成。”王雷说。
走进DigiLab实验室，各式电脑设备摆满了办公桌，几位老师和同学正在细细打磨新的动画作品。中国传媒大学动画与数字艺术学院副教授段雯锴，也是《龙门》的导演、技能总监，先容了利用“墨池”制作动画的事情流程：艺术家须要将创意准确地见告“墨池”，勾引它按照艺术家的想法来天生结果。天生结果有时会存在偏差，因此须要艺术家理解技能事理并不断地考试测验。“与AI沟通须要以技能或图形化的办法进行，比如输入笔墨、三维图像，或者供应参数等。”段雯锴说，目前网络上大部分AIGC视频或图片天生工具的随机性较大，要想做出有明确主题表达的作品，每个元素都须要非常精准的掌控。因此，在制作《龙门》的时候，DigiLab实验室师生团队采取了真人实拍加绿幕抠像的办法，在这个过程中拍摄了很多角色动作，“墨池”会将实拍素材进行打磨，并补充出更多细节，末了形成水墨晕染的效果。
这是一个人机沟通的过程，也是一个从创意到实践的过程。《龙门》便是DigiLab实验室师生团队与“墨池”沟通的产物。“墨池”采取多模态视频天生办法，占领了诸多技能难题，在角色面部特色稳定性、较长镜头天生中，降落了视频抖动与局部缺点，使画面拥有灵动而充满意境的水墨质感。
“水墨动画是中国动画学派的核心和宝贝。如果我们用新技能能天生跟以往一样，乃至更好的效果，对全体中国动画行业都是有所贡献的。”王雷说。
呈现新的视觉效果
提及“墨池”模型的研发，王雷想起了一些有趣的故事。AIGC演习和天生须要算力，开拓“墨池”正值夏天，实验室里所有的电脑都在全力运转。实验室变得非常热，团队成员来到别的地方办公，远程操控电脑。“空无一人的实验室也能连续‘热火朝天’的创作，可见技能让创作模式发生了多大的改变。”王雷说。
建立“墨池”模型的过程充满寻衅。AIGC作为新技能，缺少足够的现成材料，须要不断地做测试。王雷见告笔者：“过程中，我们经历了大量试错和碰着问题不知如何办理的时候，这也是履历积累的过程。”段雯锴说，在演习自主模型的过程中，自己每天都会打仗到新技能，须要不断更替优化。
段雯锴结合动画生产细节举例说，如果用二维或者三维动画的办法去创作水墨动画，会涉及贴图、灯光渲染等办法，天生的画面精度较低，AI则可以做到细节的无限添加。“AIGC能够实现传统动画创作模式不敢做或无法实现的效果，首创动画新的视觉路线。”他说。
“AIGC技能对动画界的影响，可能相称于手机拍照功能之于拍照界，能够给创作者带来新的可能。”王雷表示，AIGC技能一方面降落了创作门槛，让普通人就可以做出大略的动画，并通过在短视频平台的分享，让动画更贴近日常生活；另一方面，这项技能还能催生更多更加快捷的专业化工具，呈现更加令人惊叹的视觉效果。“我们从业者还须要进一步思考技能和内容表达的关系，在技能迅速更迭的时期发挥所长，节制技能的自主性和独创性，用好技能做更专业的内容。”王雷说。
据悉，中国传媒大学已经和英特尔公司联合创办了AIGC创作实践中央。强大的硬件能力加持，相信将有助于高校和平台收成更多成果。
“墨池”模型目前紧张能天生一种风格的水墨动画。DigiLab实验室团队已经策划了新的项目，将逐步丰富“墨池”的家族谱系，迭代“墨池”，并在未来的动画制作和传授教化中加以运用。“前辈们已经将传统流程做得非常精良了，往前走则是我们应该做的思考。”王雷说，AIGC时期，如何开拓前沿，在国际舞台上持续开释中国动画与数字艺术行业的巨大潜力，是动画科研创作者们不断努力的方向。