前言:
上一节我们介绍了ControlNet中的绘图与造字。
本节主要介绍ControlNet中的inpaint局部重绘
我们之前的基础课程中,也有用图生图的能力,见该课程 3-5 局部重绘操作实现人物换脸 。 个人感觉结果可能类似,但是ControlNet貌似更好用些。
具体的大家自行判断吧。
知识点:
- inpaint局部重绘
基础官方知识:
使用 Inpaint 控制稳定的扩散。
模型文件:control_v11p_sd15_inpaint.pth
配置文件:control_v11p_sd15_inpaint.yaml
实战
总体来看,通过使用ControlNet多Unit的控制,使得重绘的效果更好了些。
具体实现步骤:
图生图模式选择 重绘。
设置2道ControlNet控制, Unit0 控制 重绘, Unit1 ,控制使用深度。
选择脸部作为蒙版区域。 最终效果如右图。
和没有使用 ControlNet控制的直接重绘对比下图 。 效果上差一些。 尤其我们使用Depth深度图,感觉立体效果和融合效果,差很多。大家可以多试试。
RA/SD 衍生者AI训练营