我关注这个项目有些韶光了,最开始打仗的是来源于视频网站上的换脸视频,视频中的人脸贴合度险些完美,以为好奇就去查了下所用的软件,终极找到了它 DeepFaceLab,github上已经开源三年。
DeepFaceLab
github上的先容是
用于创建 deepfake 的领先软件
deepfake我查了翻译,大概意思便是极致的赝品,软件基于python编写,深度学习的"黑科技"产物。
效果展示
这里用某论坛的迪丽热巴模型进行展示:
视频加载中...
上面的视频只是经由大略的处理,不仔细看的话险些看不出什么瑕疵,如果追求极致须要AE、达芬奇等软件进行二次调度。
不过这种软件也很随意马虎被他人恶意利用,稍不把稳就成为了 视频的主角,好在想要达到完备"真"的效果难度和本钱还是挺大的。
首先对图片素材的哀求是2k以上、多角度、多表情,然后用GPU进行深度学习(GPU的好坏直接影响演习速率,上面的视频是3090显卡运行一个月的效果),对付脸部有遮挡物的还需演习xseg遮罩,末了还要闇练的节制AE、达芬奇等软件进行调色和脸部角度的调度使整体看起来更折衷。
deepfacelab换脸
目前官网并没有公布该软件的实际用场,盲猜往后技能成熟了可能会用于影视或直播等,艺人和网红授权利用自己的人脸,然后找到脸型相似的人充当"替人"去演戏或直播,从而实现真正的"分身"术。