近日,这一领域彷佛又取得了新的打破:一种名为 DeepFaceDrawing 的 AI 图像转换器能够根据大略的素描草图,创建出足以以假乱真的人脸图像,并取得了不俗的成果。
AI与图像:逼真的假象实在,当下已经有一种 AI 算法,可以帮助我们绘制出 3D 物体的平面图片。该算法利用图论(graph theory),首先获取 3D 模型作为输入,并逐步进行细分,末了绘制出这一 3D 工具的平面图像作为输出。
但是,如果将这个过程倒转过来,我们就能得到其余一种算法——该算法可以从粗糙的绘画图纸中得到逼真的图像。虽然这看起来像是科幻小说中的场景,但一年半前,NVIDIA 的科学家就已经开始利用它了。
人们可以从左边下侧的选项中选择要绘制的内容,并在右侧得到逼真的图像输出,然后能够得到拍照般的风景图像。但是它也具有局限性——不能创建出逼真的人脸。
实际上,为了达到这一目标,科学家们也做出了许多努力,然而多数类似的AI算法框架都须要详细的、绘制良好的草图。因此实用性、普遍性都不足高。
而一个全新的AI算法正在办理这些问题,这便是 DeepFaceDrawing:从素描草图中深度天生面部图像。
据理解,该项目由北京中国科学院和喷鼻香港城市大学的一个团队创造,DeepFaceDrawing 也是迄今为止最前辈的图像天生器之一。
手残党也能画出摄像级人脸DeepFaceDrawing 实际上是一种基于深度学习的图像-图像转换技能,从非常大略粗糙的素描草图开始,创建出逼真的人脸图像,这一设计旨在帮助那些绘图履历很少的人。
根据该团队的说法,“我们的紧张想法是从真实的面部素描图像中隐式地学习一个合理的面部描写空间,并在该空间中找到最靠近的点来仿照该输入草图。”
DeepFaceDrawing 的深度学习框架利用模块来天生图像-CE(组件嵌入),FM(功能映射)和IS(图像合成)。CE模块实质上可以识别一些最突出的面部特色,例如眼睛,鼻子,嘴巴和目标面部的“剩余”部分。然后,FM和IS模块一起“将组件特色向量映射到逼真的图像”。
利用这一技能时,用户只须要绘制一张草图作为参考图像,而后就能得到与您的草图相匹配的靠近照片般逼真的人脸。有趣的是,在绘制毛发之前,它还会自动供应一些绘画出发点。但是,如果我们选择自己创造想要的发型,它也会按照我们的图纸如实地进行。
不仅如此,它还供应了更多惊人的功能,例如:可以帮助用户调度不同的面部特色,并且一处调度可以同时映射到许多可能的人脸上。
它还具有一个有趣的功能——用户可以不画任何东西,只须要选择几个自己喜好的面部特色,就可以得到它们组成的空想的脸。这便是所谓的人脸复制粘贴(Face Copy-Paste)。
新打破,新用场,新 BUG这一 AI 转换器能够创建一些令人难以置信的逼真的人脸图像。但是,仍有一些问题须要办理。
例如,一个女人的素描中,两只眼睛大小不一,而在AI对应着产生的图像中,眼睛的不同乃至导致了面部其他特色发生变革,这显然不是绘画者最初的目的。
而且,DeepFaceDrawing 彷佛也紧张产生以白种人或拉丁美洲工具为特色的图像。但是,办理这些问题也只是韶光问题。
在实际生活中,这项技能也可能有许多用场。该团队指出,他们的框架在“犯罪调查,角色设计,教诲培训等”方面特殊有用。
此外,也有人坚信,数字艺术家们将在不久的将来采取这种技能,它将帮助艺术家们将自己的艺术构想变为现实,这不仅能够提高契合度,还有利于缩短实际的实行韶光。排版:赵辰霞编审:王新凯
参考资料:https://futurehubnet.blogspot.com/2020/09/ai-to-help-you-create-real-human-faces.htmlhttps://hothardware.com/news/ai-turns-sketches-into-portraits