精讲stable diffusion的controlNet插件

朋远方 • 2023年10月8日下午10:01 • 学习笔记, 计算机视觉 • 阅读 14809

Tile/Blur（平铺/模糊）

使用平铺/模糊控制稳定的扩散

模型文件：control_v11f1e_sd15_tile.pth

配置文件：control_v11f1e_sd15_tile.yaml

该模型可以通过多种方式使用。总的来说，该模型有两种行为：

忽略图像中的细节并生成新的细节。
如果本地图块语义和提示不匹配，则忽略全局提示，并根据本地上下文引导扩散。

由于该模型可以生成新的细节并忽略现有的图像细节，因此我们可以使用该模型去除不良细节并添加精致的细节。例如，消除因图像大小调整而导致的模糊。

Inpaint（局部重绘）

使用 Inpaint 控制稳定的扩散。

模型文件：control_v11p_sd15_inpaint.pth

配置文件：control_v11p_sd15_inpaint.yaml

要使用它，请将 ControlNet 更新到最新版本，完全重新启动（包括终端），然后转到 A1111 的 img2img inpaint，打开 ControlNet，将预处理器设置为“inpaint_global_harmonious”并使用模型“control_v11p_sd15_inpaint”，启用它。

不需要将图像添加到 ControlNet