Stable Diffusion 1.8新版本最强功能,内置丝滑重绘效果,毫无违和感

413 阅读3分钟

前一阵子 Stable Diffusion 1.8 发布了!

更新了很多有用的功能

  • 处理性能优化,跑图节省显存消耗
  • 内置 LCM 采样器
  • 支持 SDXL-inpainting 模型
  • Soft inpainting

今个分享下我觉得比较有意思震惊我的功能 Soft inpainting,可以实现毫无违和感的局部重绘

Soft inpainting

Soft inpainting 可以将原始内容和修复内容无缝地融合在一起。在局部重绘的时候,可以毫无违和的将原图和遮罩图像进行融合。

这在 Stable Diffusion 1.8之前其实挺难实现的,不管是调整羽化值还是抠出细致蒙版图,最后的出图效果都还是有些瑕疵

使用

Soft inpaninting 是 Stable Diffusion 1.8 新功能,所以需要先升级到1.8

接着来看个例子看看局部重绘和开启了 Soft inpainting 后的差异效果

生成背景底图

这块大家可以根据自己需要生成即可。

model: majicmixRealistic_v7
prompt: A forest, highly detailed
Negative prompt: natural, colorful, deformed, sketch, low contrast, watercolor
Steps: 35

背景图

局部重绘效果

先来看看使用默认的局部重绘效果

添加遮罩

将生成的背景图放到图生图局部重绘中,用画笔在图生扣出一块放我们要重绘的区域

修改提示词参数

比如,我希望在遮罩区域中添加一个女孩的背景

prompt: back of 1girl in a forest,highly detailed

参数修改好后,直接出图

emmm... 这个效果还是比较瘆人的。

可以很明显的看出来遮罩边界和背景图融入的非常生硬。而且融入时会丢东西(🐶)脚不见了~

Soft inpainting

使用 soft inpainting,默认情况下我们只需要打开 Soft inpainting,并将蒙版模糊调大就可以得到比较好的结果!

修改参数后生成

Soft Inpainting 参数

打开 Soft inpainting 后可以看到几个参数配置

Schedule bias 时间表偏差

时间表偏差会在每个步骤中调整原始内容的保留。默认值为 1 时。简单来说就是在重绘时如何保留原图的内容

Schedule Bias < 1

在小于1时,会在出图靠后的步数后更多的保留原图内容。

Schedule Bias > 1

在大于1时,则相反,会在出图开始的步数更多的保留原图内容。

在小于1的时候,原图的内容保留的比较少,保留了更多的修复内容。并不能很好的融合到原图中

Preservation strength

Preservation strength 的作用和 Schedule bias 的效果是一样的。区别在于 Schedule bias 随着值的变化是指数性的改变。

而 Preservation strength 是线性变化

Transition contrast boost

transition contrast boost 过渡对比度增强控制原始内容和修复内容混合的锐度。

低值会产生柔和的混合,到修复区域的过渡很顺利。

高值会产生强烈的对比度。它允许急剧过渡到原始内容。

Difference threshold

差异阈值控制在不显示重绘内容的情况下允许进行多少更改。

增加差异阈值更多地显示原始内容,直到整个图片不变。可以实现淡出效果。