Hello~o,朋友们~

欢迎回到AI趣闻屋。

ControlNet 插件非常故意思,虽然趣闻屋前面有出过 ControlNet 的全模型先容,但总有种意犹未尽,充满探索欲的冲动。

于是,忍不明晰!

让它过冬AI绘画一句指令改变画风

Instruct Pix2Pix 模型

ControlNet Instruct Pix2Pix 模型,给它一句指令,让图像画风改变,如:

1. 让它过冬(make it winter)

2. 让它着火 (make it on fire)

3. 让它下雨 (make it rain)

4. 让它变成赛博朋克风 (make it cyberpunk)

5. 让她的头发颜色变成赤色 (make her clothes color into red )

6. 让她变成一个男人(make she to be a man)

7. 让她笑、让她伤心、等等

Pix2Pix 模型的利用

利用Instruct Pix2Pix 模型不须要太繁芜的设置。
在文生图(txt2img)就能直策应用,趣闻屋比拟图生图(img2img) ,以为 Pix2Pix在文生图(txt2img)里利用的效果更好。

Pix2Pix 模型没有额外参数,不须要设置预处理器,利用时选择 control_v11e_sd15_ip2p 模型即可。

掌握模式(Control Mode/Guess Mode):趣闻屋建议选择平衡(Balanced)。
为什么?看下图,提示词:make it cute

只有在平衡模式下,输出还有原图的色彩。
其他模式下,AI已经放飞了自我!

栗子

参数设置:

Steps: 25, Sampler: Euler a, CFG scale: 7,

Model: deliberate_v2,

ControlNet 0 Enabled: True, ControlNet 0 Preprocessor: none,

ControlNet 0 Model: control_v11e_sd15_ip2p [c4bb465c],

ControlNet 0 Weight: 1,

ControlNet 0 Starting Step: 0, ControlNet 0 Ending Step: 1,

栗子(1):改变一张城市照片的风格、状态

原图:

提示词里输入:make it on fire

就着火了,火势还很猛~[捂脸]

make it winter:

冬天的雪花,屋子上也都包裹着雪堆。
很细节。

make it cyberpunk:

赛博朋克风,这光和影,这色调。
你们以为像吗?

栗子(2):人像风格转换

原图:

俏丽的小姐姐~

make she to be a man:

这个姿态,这个构图,小姐姐变小哥哥咯。
[狗头]

make her hair color to red:

make her hair color to green:

这里,Pix2Pix 模型在改变局部内容上,还不是特殊好。
我们只是想改变头发颜色,但它基本改变了全图。
不知道后续版本会不会可以做到指哪儿打哪儿。
[狗头]

make her eyes color to red:

赤色丧尸风格的既视感有没有,然而趣闻屋只是想改变一下眼睛的颜色而已。
它却把整体的画风都给改变,血泪都出来咯。
[捂脸]

末了

ControlNet Instruct Pix2Pix 是一个很故意思、有创意的模型,只用一句指令就改变图像画风。
趣闻屋以为它不仅仅只是这些用法,或者说这只是这个模型的根本用法。

小伙伴们有有趣的玩法,请评论区留下你俏丽帅气的足迹!

感谢小伙伴们的阅读!

我们下期分享见!

电梯:

Controlnet 全模型详解

文生图详解

图生图详解