Stable Diffusion 图片背景完美替换_stablediffusion能不能替换图片内容-CSDN博客

本文链接：https://blog.csdn.net/text2201/article/details/146503208

今天分享 Stable Diffusion 图片背景完美替换功能，通过 Stable Diffusion 图生图重绘蒙版进行背景图的二次重绘。

在广告产品图、头像背景替换、图片后期处理等场景下用到的都很频繁。

整体步骤：

通过 removebg 插件实现图片主体蒙版的抠图
结合图生图的上传重绘蒙版实现背景图的重绘
设置 ControlNet 深度模型进行优化

一插件安装

首先我们需要安装 rembg
插件，用来获取图片主体的蒙版图。https://github.com/AUTOMATIC1111/stable-diffusion-webui-rembg.git

在这里插入图片描述

安装成功后需要重启 webui

二出图

我们可以先出一张图，方便后续的操作，如果你已经有图了，就不需要这一步了。

模型：majicmixRealistic_v6
提示词：a closeup photorealistic photograph of a rock tower with some
leaves,fantastic four theme. icy colorful drink. bright scene. fine detail.
this 4 k hd image is trending on artstation,featured on behance,well -
rendered,extra crisp,features intricate
detail,epic
composition and the style of unreal engine,
采样器：Euler a
尺寸：576x768

三图片主体蒙版获取

有了图片后，打开后期处理(Extras) 菜单，将图片上传，并设置 移除背景 片段的参数

在这里插入图片描述

我们直接选择 u2net 模型，然后勾选回送蒙版，最后点击生成，获取蒙版图片

在这里插入图片描述

四蒙版重绘

有了主体的蒙版图之后，我们就可以进行图生图重绘了

打开图生图菜单，选择上传重绘蒙版，将原图和蒙版图分别推拽到上传区域中。（提示词我们可以根据自己的需求编写）

其中参数

蒙版模式：选择重绘非蒙版内容，我们需要保留蒙版内容，只需要重绘背景内容即可
重绘幅度：需要设置成1，相当于重新生成背景了，不然会和原图背景比较相近

其它参数可以使用默认，最后点击再次生成

整个效果还是很不错的，主体内容没有任何变化，也可以比较好的融入到新的背景中。

当然我们还可以设置 ControlNet 继续优化

五 ControlNet 深度处理器优化

通过上面的蒙版重绘后基本上已经能够很好的完成背景替换了

接着我们还可以设置 ControlNet 的深度预处理器让图片的层次感更强。在图生图下面打开 ControlNet
配置，配置好深度预处理器和模型，再次生成，整个景深效果会更好。

在这里插入图片描述

更多🌰

在这里插入图片描述

为了帮助大家更好地掌握 ComfyUI，我在去年花了几个月的时间，撰写并录制了一套ComfyUI的基础教程，共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。