Hello~o,朋友们~

欢迎回到AI趣闻屋。

ControlNet 插件非常有意思,虽然趣闻屋前面有出过 ControlNet 的全模型介绍,但总有种意犹未尽,充满探索欲的冲动。

于是,忍不了了!

Instruct Pix2Pix 模型

ControlNet Instruct Pix2Pix 模型,给它一句指令,让图像画风改变,如:

1. 让它过冬(make it winter)

2. 让它着火 (make it on fire)

3. 让它下雨 (make it rain)

4. 让它变成赛博朋克风 (make it cyberpunk)

5. 让她的头发颜色变成红色 (make her clothes color into red )

6. 让她变成一个男人(make she to be a man)

7. 让她笑、让她伤心、等等

Pix2Pix 模型的使用

使用Instruct Pix2Pix 模型不需要太复杂的设置。在文生图(txt2img)就能直接使用,趣闻屋对比图生图(img2img) ,觉得 Pix2Pix在文生图(txt2img)里使用的效果更好。

Pix2Pix 模型没有额外参数,不需要设置预处理器,使用时选择 control_v11e_sd15_ip2p 模型即可。

控制模式(Control Mode/Guess Mode):趣闻屋建议选择平衡(Balanced)。为什么?看下图,提示词:make it cute

只有在平衡模式下,输出还有原图的色彩。其他模式下,AI已经放飞了自我!

栗子

参数设置:

Steps: 25, Sampler: Euler a, CFG scale: 7,

Model: deliberate_v2,

ControlNet 0 Enabled: True, ControlNet 0 Preprocessor: none,

ControlNet 0 Model: control_v11e_sd15_ip2p [c4bb465c],

ControlNet 0 Weight: 1,

ControlNet 0 Starting Step: 0, ControlNet 0 Ending Step: 1,

栗子(1):改变一张城市照片的风格、状态

原图:

提示词里输入:make it on fire

就着火了,火势还很猛~

make it winter:

冬天的雪花,房子上也都包裹着雪堆。很细节。

make it cyberpunk:

赛博朋克风,这光和影,这色调。你们觉得像吗?

栗子(2):人像风格转换

原图:

美丽的小姐姐~

make she to be a man:

这个姿态,这个构图,小姐姐变小哥哥咯。

make her hair color to red:

make her hair color to green:

这里,Pix2Pix 模型在改变局部内容上,还不是特别好。我们只是想改变头发颜色,但它基本改变了全图。不知道后续版本会不会可以做到指哪儿打哪儿。

make her eyes color to red:

红色丧尸风格的既视感有没有,然而趣闻屋只是想改变一下眼睛的颜色而已。它却把整体的画风都给改变,血泪都出来咯。

最后

ControlNet Instruct Pix2Pix 是一个很有意思、有创意的模型,只用一句指令就改变图像画风。趣闻屋觉得它不仅仅只是这些用法,或者说这只是这个模型的基础用法。

小伙伴们有有趣的玩法,请评论区留下你美丽帅气的足迹!

感谢小伙伴们的阅读!

我们下期分享见!

电梯:

Controlnet 全模型详解

文生图详解

图生图详解

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注