【AIGC】ComfyUI——局部重绘

一、软边缘处理

官网链接：https://www.liblib.art/sd

checkpoint模型一般使用maj麦橘写实

针对软便于处理的话，预处理器一般使用最多的就是hed。

二、ComfyUI局部重绘Inpaint工作流

下面简单介绍两种局部重绘工作流的两种方式。

局部重绘工作流（VAE编码器的方式）

我们先进行一个简单的局部重绘工作流，如下：

采样器使用dpmpp_sde，调度器使用karras，降噪这里最高不要使1，使用范围建议在0.6~0.9之间（当然也不是绝对的，最适合的依然是需要我们慢慢进行调试）。

局部重绘工作流（插入噪波的方式）

• 第一种方式：即插入噪波Latent的方式就是按照浅空间生成噪波，最终利用噪点生成图像，该方式与原图片的融合度更高，适合大范围需要重绘的图片。
• 第二种方式：即VAE内补编码器的的方式，可以理解为直接生成我们想要的内容然后直接贴上去，该方式虽然融合度方面不如第一种方式，但是生成内容方面是要比第一种方式更好的，适合小范围需要重绘的图片。

具体效果如下图所示：

三、外延

外延效果基于VAE内补编码器进行实现。

提示词利用WD1.4处理器进行生成。

四、蒙版类节点

语义分割（Clip）

自动为选定内容生成遮罩，好处就是选中的区域边缘有点“黑化过渡效果”。

效果如下：

G-DinoSAM语义分割

效果如下：

G-DinoSAM语义分割通过输入提示词来提取想要的内容。

BBOX检测（效果较好）

BBOX对人像的调整效果是比较好的，关于BBOX的更深度的一个节点就是面部细化节点（这里省略）。

效果如下：

SEGM检测（效果较好）

SegmentAnything Ultra V2可以算是目前检测效果最好的API了。

效果如下：

SEGM检测和人像遮罩 UItra V2算是一模一样的，前者可以提取图像中的任意内容（通过输入提示词）。

人像遮罩 UItra V2

与SegmentAnything Ultra V2类似的API还有一个就是人像遮罩 UItra V2。

效果如下：

SAM检测

效果如下：

这里效果虽然和人像遮罩有点像，但是细看可以发现，SAM检测这里的效果图是有棱角的，而人像遮罩的效果图就比较缓和。

六种效果对比总结

在上述六种生成效果中，当前处理人像最好的是人像遮罩和BBOX这两种。可以用于换装类型的工作流。

以上六种对比效果图如下：

五、遮罩反转

我们以人像遮罩为例来演示遮罩反转：

加入遮罩反转前：

后续操作会保留除了脸部之外其余的部分。可以这么理解就是黑色部分为保留部分，白色部分为后续需要修改的部分。

加入遮罩反转之后效果如下：

遮罩反转可以用于实现摄影工作流中。AIGCco