文章涉及的所有有关AI动图视频的软件和平台基本都须要轻微会写点描述词的能力，动图的制作和普通AI绘图极其相似，只是须要在关键词的内容上把稳以下几个点：
①描述的角色的内容旁，增加动词动作，比如女孩微笑大笑
②描述风格的用词阁下，采取移动方向的描述，比如向左平移，向上向下
RunwayAI绘图里大致有midjourney还有stable diffusion两派，类比一下，AI动图和视频内容中，Runway和midjourney很类似，可以不用邪术，除了Runway该当还有很多不同的平台在，希望能有更多便宜大碗的网站推举。
Runway官网可以直接天生视频：https://app.runwayml.com/
亮点：
①绿幕去背、模糊人脸、移除影片物件等等视频剪辑的便捷操作，考试测验一下会有惊喜。
视频剪辑的便捷操作
②不吃自己的显卡，如果电脑配置跟不上，类似Runway的平台，真滴喷鼻香。
③笔刷涂抹掌握部分画面移动情形，这个设计补足了单单笔墨提示词的短板，更适宜天生稳定的图片。
缺陷：
①目前没能找到以视频天生AI视频的操作，只有笔墨描述天生或者图片天生视频。
笔墨描述天生或者图片天生视频
②免费天生的几张图会带有水印，不过尝鲜也够用
③每次天生的视频或者动图的时长只能4秒，但是由于可以在4秒的根本上，通过末了一帧天生再得到四秒钟，实在是可以拼成很长一段视频
Runway效果
Aimate diff很早的时候大多数AI视频的做法是利用stable diffusion中controlnet对已经变成图片的视频帧进行批量AI绘制，然后利用图片转视频的操作再形成AI视频，但是这种处理办法会涌现跳帧以及不稳定征象。然而近期Animate diff终于出stable diffusion的插件了，效果比较丝滑、稳定、闪烁较小，是一大进步。
早期做法抽搐感强
亮点：
①可控性比Runway高，不卡去世4s钟，显卡有多大胆，韶光有多大产。
②开源，免费之光！
！
缺陷：
①须要不错显卡，推举显存12GB往上（个人是N卡3060，12GB，用的SD WebUI版本的Animate diff，不太能视频天生视频很随意马虎爆显存），当然也有说8G显存也够用。
②操作轻微麻烦一些
显卡问题办理方案：
①单独安装ComfyUI版的Animate diff，占用显存比较少，但须要适应新的事情流节点
②云端租用，可以考试测验百度的飞桨平台每天可以免用度8小时，或者利用青椒云可以按小时租用云端电脑搞搞（只带了条记本电脑的时候会用）
③一键换新显卡（苦笑）
animate diff插件下载：
①SDwebUI扩展-可用-搜索animate diff安装插件即可
②animate diff模型和镜头运动lora下载：
https://huggingface.co/guoyww/animatediff/tree/main
模型放到SD源目录\extensions\sd-webui-animatediff\model
镜头掌握lora放到SD源目录\models\Lora
重点参数调度：
部分参数
①显卡配置不高，建议高度宽度512512分辨率天生，后期放大。
②启用animate diff
③动画模型：不同模型可能利用体验不同，目前考试测验二次元模型要比三次出效果。
④总帧数不小于帧率，帧率默认填8比较好用，随意马虎出效果。
⑤closed loop中N（不循环的视频动图）A（循环的）R-P、R+P（由算法按效果天生是否循环的动画）
⑥别的参数基本可以保持默认状态
利用贴士：
1.文生视频
①Prompt Travel的利用:
普通提示词后加上Prompt Travel触发词“帧数: 提示词”，把稳半角冒号后面有空格。
例如：
1boy,short black hair,smile,Masterpiece
0: closed mouth
8: open mouth
解释刚开始是闭嘴，第8帧后伸开嘴巴，从而利用提示词掌握画面。
Prompt Travel利用效果示意
②添加掌握镜头lora：此处不如Runway的画笔掌握部分画面移动的功能好用，是对全体画面的镜头移动掌握。
2.图生视频
想要天生两张图间隔动画：可以controlnet上传初始图，animate diff上传末端帧内容，中间由AI发挥，把稳绘制中重回幅度只管即便调度较大，不要太小，太小随意马虎突变随意马虎出怪东西，得当重绘幅度为0.75旁边。
两张图补间重绘幅度较小