回来啦 | Stable Diffusion 图片背景完美替换
AI魔法学院
2024-05-20
分享海报

今天分享 Stable Diffusion  图片背景完美替换 功能,通过 Stable Diffusion 图生图重绘蒙版进行背景图的二次重绘。

在广告产品图、头像背景替换、图片后期处理等场景下用到的都很频繁。

整体步骤:

1. 通过 removebg 插件实现图片主体蒙版的抠图

2. 结合图生图的上传重绘蒙版实现背景图的重绘

3. 设置 ControlNet 深度模型进行优化

插件安装

首先我们需要安装 rembg 插件,用来获取图片主体的蒙版图。https://github.com/AUTOMATIC1111/stable-diffusion-webui-rembg.git

 

安装成功后需要重启 webui

出图

我们可以先出一张图,方便后续的操作,如果你已经有图了,就不需要这一步了。

模型:majicmixRealistic_v6
提示词:a closeup photorealistic photograph of a rock tower with some leaves,fantastic four theme. icy colorful drink. bright scene. fine detail. this 4 k hd image is trending on artstation,featured on behance,well - rendered,extra crisp,features intricate detail,epic composition and the style of unreal engine,
采样器:Euler a
尺寸:576x768

 

图片主体蒙版获取

有了图片后,打开 后期处理(Extras) 菜单,将图片上传,并设置 移除背景 片段的参数

 

我们直接选择 u2net 模型,然后勾选回送蒙版,最后点击生成,获取蒙版图片

 

蒙版重绘

有了主体的蒙版图之后,我们就可以进行图生图重绘了

打开图生图菜单,选择 上传重绘蒙版 ,将原图和蒙版图分别推拽到上传区域中。(提示词我们可以根据自己的需求编写)

 

其中参数

· 蒙版模式:选择重绘非蒙版内容,我们需要保留蒙版内容,只需要重绘背景内容即可

· 重绘幅度:需要设置成1,相当于重新生成背景了,不然会和原图背景比较相近

其它参数可以使用默认,最后点击再次生成

 

整个效果还是很不错的,主体内容没有任何变化,也可以比较好的融入到新的背景中。

当然我们还可以设置 ControlNet 继续优化

ControlNet 深度处理器优化

通过上面的蒙版重绘后基本上已经能够很好的完成背景替换了

接着我们还可以设置 ControlNet 的深度预处理器 让图片的层次感更强。在图生图下面打开 ControlNet 配置,配置好深度预处理器和模型,再次生成,整个景深效果会更好。

 

更多

 

 

 

 

出自:https://mp.weixin.qq.com/s/cQ5CR-Dh60bvr088qjRsiQ

© THE END

转载请联系本网站获得授权

投稿或版权问题请加微信:skillupvip