精讲stable diffusion的controlNet插件

朋远方 • 2023年10月8日下午10:01 • 学习笔记, 计算机视觉 • 阅读 14809

用艺术线条控制稳定的扩散。

模型文件：control_v11p_sd15_lineart.pth

配置文件：control_v11p_sd15_lineart.yaml

该模型在 awacke1/Image-to-Line-Drawings 上进行训练。预处理器可以从图像生成详细或粗略的艺术线条（Lineart 和 Lineart_Coarse）。该模型经过足够的数据增强训练，并且可以接收手动绘制的线稿。

可接受的预处理器：

lineart_anime（动漫）

lineart_anime_denoise（动漫、降噪）

lineart_coarse（粗略）

lineart_realistic（写实）

lineart_standard (from white bg & black line)（标准）

invert (from white bg & black line)（反转）

下面是一个利用invert (from white bg & black line)（反转）的预处理器，为白底黑线的线稿上色的案例：

使用动漫艺术线条控制稳定的扩散

模型文件：control_v11p_sd15s2_lineart_anime.pth

配置文件：control_v11p_sd15s2_lineart_anime.yaml

该模型可以将真实的动漫线条图或提取的线条图作为输入

注意事项：

1、需要一个类似文件“anything-v3-full.safetensors”二次元模型来运行；

2、除非使用lora，否则提示词prompt要尽可能详细；

原创文章，作者：朋远方，如若转载，请注明出处：https://caovan.com/jingjiangstable-diffusiondecontrolnetchajian/.html