LivePortrait,这个名字听起来就像是邪术,但它实在是现实天下中的黑科技。
想象一下,你那尘封已久的相册里,那些定格在韶光里的笑脸,溘然间动了起来,眨眼、微笑、乃至说话,这不再是电影里的场景,LivePortrait让它变成了现实。

这是由业界大厂快手开源的一个项目,前段韶光可灵的爆火,也让快手随着火了一把,这个项目的开源,让老厂再次抖擞新颜。

这个框架,就像是一个神奇的画笔,只须要你供应一张静态的肖像,它就能绘制出一段流畅的动态视频。
这不仅仅是技能上的打破,更是对传统动画制作的一次颠覆。
它高效、精确,乃至还能处理多人物肖像的无缝拼接,让每个人物的动作都自然流畅,没有任何突兀的边界。

本日的一键包在官方8月2日发布的最新版做了更新,新版紧张新增了动物模式,可以驱动动物做任何表情同步操作了。
而且新增了更多实用的图片和视频生成功能。
由于更新的地方较多,以是这次没法做升级包,只供应完全的一键包。

LivePortrait V2版一张照片生成生动神色视频支持动物神色迁移

本地一键整合包下载:

https://deepface.cc/thread-313-1-1.html

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

需求人群:

"目标受众包括动画制作者、游戏开拓者、电影后期制作职员等,他们须要快速天生逼真的人像动画,用于角色设计、广告制作或其他视觉媒体项目。
LivePortrait因其高效和可控性,特殊适宜须要快速迭代和精确掌握动画细节的专业用户。
"

利用场景示例:

动画制作者利用LivePortrait快速天生角色动画,用于动画电影的预览。

游戏开拓者利用LivePortrait为游戏角色创建逼真的面部表情。

广告制作团队利用LivePortrait为产品广告天生吸引人的动态人像。

产品特色:

从静态图像天生不同风格(现实、油画、雕塑、3D渲染)的人像动画

通过Kling天生的源视频进行人像视频编辑

基于给定的标量掌握眼睛和嘴唇的开合程度

通过微调动物数据,实现对猫、狗和熊猫的精确驱动

在RTX 4090 GPU上以PyTorch实现12.8ms的天生速率

现在,无论你是想制作一段个性化的肖像视频,还是想给老照片授予新的生命,LivePortrait都能帮你轻松实现。
这不仅仅是一个工具,更是一个让创意无限扩展的平台。
以是,别再让你的照片沉睡在相册里了,让LivePortrait唤醒它们,让它们动起来,讲述属于它们自己的故事。

利用教程:(只支持N卡,显存6G起)

先来看看 动物模式

动物模式基于Xposed模型,可以更加精确的检测和天生动物的面部表情。

动物模式支持上传Pickle文件和驱动视频文件来天生,如下图

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

自带几种Pickle表情,比如张嘴、含羞、愤怒、大笑、张嘴等。
你也可以上传驱动视频来掌握动物面部表情。

天生结果保留三种形式,一种视频、一种gif动画、还有一种比拟视频。
如下图:

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

动物天生操作和之前的版本是一样的,以是这里就不做过多解释。

下面说下人物天生:

和之前的版本操作差不多,多了几个参数,等下先容下新增的几个参数

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

动画选项这里新增了驱动选项 “expression-friendly”和"pose-friendly"两个参数:

expression-friendly这个参数可以有效降落天生视频的抖动,但也有翻车的情形;

如果expression-friendly模式翻车了,可以切换到 pose-friendly 模式。

详细选择哪个模式,还是要根据天生的实际效果来决定。

驱动系数

掌握最终生成效果的表情的强度,数值越大,天生的表情越靠近驱动视频。

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

图像重定向 这里新增了三个头部转向参数,比如旁边转向,高下转向和斜歪转向。

这个用场对付补全素材的小伙伴来说,可谓是太实用了。
往后就可以用一张照片补全演习模型须要的多种角度的素材了。

详细效果如下图

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

可以更灵巧的掌握头部偏转方向了。

V2版本还新增了 视频重定向功能,可以掌握视频中人物嘴唇伸开度。

LivePortrait V2版:一张照片天生生动表情视频,支持动物表情迁移

如上图,目标唇口伸开率这个参数掌握嘴巴伸开大小,0是闭合,数值越大,代表伸开度越大。

比如,上图中张嘴微笑的美女瞬间笑不漏齿,便是调节这个参数数值为0后天生的效果。

图片重定向和视频重定向这俩功能用场还远不止此,你还可以发挥想象,用来天生各种表情包等操作。