comfyui图生图和3中局部重绘的方式

介绍

今天我们将分享图生图以及局部绘制，有的时候我们生成的图像并不满意但是想要做局部修复或者重绘，这就需要用到局部重绘模式。在接下来的内容中我会分享3中局部重绘方法，具体看你需要什么

准备

先用文生图准备一张素材图，用到的提示词

正向提示词：

Masterpiece, top quality, a girl, yellow eyes, short hair, stairs, cherry blossoms, temple, girl, layered sleeves, happiness, facing the camera

负向提示词：

(worst quality, low quality:1.4), tail,

用到的模型：

niji-动漫二次元加强版_2.0.safetensors · sjidnd/LIb_damoxing at main

文生图

通过文生图我们生成了素材图，在预览图中保存图片，然后开始尝试下图生图，这里时做局部重绘的前置工作

图生图：

图生图的工作流在此基础上微调即可。

上面文生图，给了一个空的噪点图，然后在空的噪点图片上进行降噪。
那么我们现在有一张图片之后，就不再需要这张空的噪点图了，也就是将load image的这张图，输入到潜空间，再进行重新降噪即可。
但是这张图是像素图片，不能直接输入到潜空间，所以这里需要一个VAE编码器，对加载的图片进行编码，变成潜空间能够识别的内容，这样加载进来的图片,就成功的输入到潜空间了,这里VAE编码器和最后输出图片时的VAE解码器是相反的功能

正向提示词：

Masterpiece, top quality, a girl, yellow eyes, white hair, stairs, cherry blossoms, temple, girl, layered sleeves, happiness, facing the camera

这里就有一个新的知识点，就是k采样器上的降噪功能，降噪可以简单的理解为融汇幅度，数值可以在0-1之间调整，降噪值越大和原图偏离越多
如果想要与原图更加类似，调低降噪值即可，这里我调整到0.6，再来尝试一下生成的图片，整体和原图还有些相似

3种局部重绘方式

正向提示词：

Masterpiece, top quality, a girl, yellow eyes, white hair, stairs, cherry blossoms, temple, girl, layered sleeves, happiness, facing the camera

这里将头发颜色改为白色，并且给加载图像绘制遮罩层

VAE编码（局部重绘）

通过open In maskeditor绘制遮罩，然后连接到VAE编码（局部重绘）遮罩输入参数上。

设置Latent噪波遮罩来实现

可以看出来这里将遮罩单独拿出来，这里用到两个节点去实现上面vae编码（局部重绘）

clip seg方式

这种方式比较智能了，采用自动识别的方式，效果可能会好些，上面太考验遮罩层的绘制了，clip seg就不用担心了

进入manager 搜索CLIPSeg进行节点安装

手动安装clip seg节点的方式：

//custom_nodes目录下
git clone https://github.com/alessandrozonta/ComfyUI-CLIPSeg.git

更多教程

b站视频：

https://www.bilibili.com/video/BV1354JzfEf3/

视频中的工作节点流：

https://pan.quark.cn/s/6d539172f700