Hello~o,朋友们~
欢迎回到AI趣闻屋。
ControlNet 插件非常有意思,虽然趣闻屋前面有出过 ControlNet 的全模型介绍,但总有种意犹未尽,充满探索欲的冲动。
于是,忍不了了!
Instruct Pix2Pix 模型
ControlNet Instruct Pix2Pix 模型,给它一句指令,让图像画风改变,如:
1. 让它过冬(make it winter)
2. 让它着火 (make it on fire)
3. 让它下雨 (make it rain)
4. 让它变成赛博朋克风 (make it cyberpunk)
5. 让她的头发颜色变成红色 (make her clothes color into red )
6. 让她变成一个男人(make she to be a man)
7. 让她笑、让她伤心、等等
Pix2Pix 模型的使用
使用Instruct Pix2Pix 模型不需要太复杂的设置。在文生图(txt2img)就能直接使用,趣闻屋对比图生图(img2img) ,觉得 Pix2Pix在文生图(txt2img)里使用的效果更好。
Pix2Pix 模型没有额外参数,不需要设置预处理器,使用时选择 control_v11e_sd15_ip2p 模型即可。
控制模式(Control Mode/Guess Mode):趣闻屋建议选择平衡(Balanced)。为什么?看下图,提示词:make it cute
只有在平衡模式下,输出还有原图的色彩。其他模式下,AI已经放飞了自我!
栗子
参数设置:
Steps: 25, Sampler: Euler a, CFG scale: 7,
Model: deliberate_v2,
ControlNet 0 Enabled: True, ControlNet 0 Preprocessor: none,
ControlNet 0 Model: control_v11e_sd15_ip2p [c4bb465c],
ControlNet 0 Weight: 1,
ControlNet 0 Starting Step: 0, ControlNet 0 Ending Step: 1,
栗子(1):改变一张城市照片的风格、状态
原图:
提示词里输入:make it on fire
就着火了,火势还很猛~
make it winter:
冬天的雪花,房子上也都包裹着雪堆。很细节。
make it cyberpunk:
赛博朋克风,这光和影,这色调。你们觉得像吗?
栗子(2):人像风格转换
原图:
美丽的小姐姐~
make she to be a man:
这个姿态,这个构图,小姐姐变小哥哥咯。
make her hair color to red:
make her hair color to green:
这里,Pix2Pix 模型在改变局部内容上,还不是特别好。我们只是想改变头发颜色,但它基本改变了全图。不知道后续版本会不会可以做到指哪儿打哪儿。
make her eyes color to red:
红色丧尸风格的既视感有没有,然而趣闻屋只是想改变一下眼睛的颜色而已。它却把整体的画风都给改变,血泪都出来咯。
最后
ControlNet Instruct Pix2Pix 是一个很有意思、有创意的模型,只用一句指令就改变图像画风。趣闻屋觉得它不仅仅只是这些用法,或者说这只是这个模型的基础用法。
小伙伴们有有趣的玩法,请评论区留下你美丽帅气的足迹!
感谢小伙伴们的阅读!
我们下期分享见!
电梯: