探索【Stable-Diffusion WEBUI】的插件:ControlNet 1.1

ControlNet是一个用于精确控制图像生成的插件,新版本v1.1带来了模型和预处理器的重大更新。新增多个模型,每个约1.5GB,且界面有所改变。预处理器功能丰富,包括OpenPose姿态检测和Canny边缘检测等。建议用户从openai.wiki获取最新整合包,以获得最佳体验。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

(零)前言

本篇主要提到ControlNet新版本的使用,和旧版本的变化,并偷懒参考了别人很不错的文章。
更多不断丰富的内容参考:🔗《继续Stable-Diffusion WEBUI方方面面研究(内容索引)》

(一)ControlNet

WEBUI的插件里,ControlNet是少数几个不需要翻译的插件,因为翻译了也没意思:控制网络

它的作用是,用模型进一步(精确)控制生成的图片内容(主要是人像,也包括建筑风景等),
可用多种算法检测已有图片的边缘,深度,身体手部姿态。或则来自涂鸦,生成新的图片。

需要精确控制图片输出时使用,参考:ControlNet|使用教程
比如(很多控制,这里只放2个例子,简单看看吧):

  • OpenPose 姿态检测
    更加和谐的图片

  • Canny 边缘检测
    在这里插入图片描述

(二)ControlNet(v1.1)

目前ControlNet升级了版本变化很大,主要是多了很多预处理器,并且模型也都更新了。
我正准备写几句,突然发现🔗openai.wiki 里更新了相关的文章,分3篇详细介绍了新版各种新模型和使用,那我就偷懒不用具体写了,参考:🔗ControlNet|V1.1版使用教程【上】

主要变化如下:

(2.1)模型

旧的模型放在:xxxx\SDWEBUI\models\ControlNet\目录中,8个模型文件,每个大约5.5GB左右。
新的模型放在:xxxx\SDWEBUI\extensions\sd-webui-controlnet\models\目录中,我这14个,每个1.5GB左右。

PS:旧模型配新预处理器也可以用?不过建议大家还是从🔗openai.wiki 的文章中去下载整合的包。
因为不仅要模型,预处理器也需要在线下载一些文件,有时网速很难完成,简直是拼人品。

(2.2)新版界面

版本1.1是一个很大的升级,而且目前ControlNet继续疯狂的更新中。但基本用法和以前一样。
就是从已有的图片中,提取某种模型的特征信息,用于生成新的图片。
界面和以前稍微有区别,例子如下:
在这里插入图片描述

(2.3)预处理器

具体仍然看🔗openai.wiki 里面很详细。
预处理器一大堆,这里截图展示不完,下面还有一些(翻译后更加占用垂直空间-_-)。
我粗略翻译了一下:🔗Stable-Diffusion WEBUI 简体中文语言包(2023.05.01更新)

所以我这里列表看上去大概如下:
在这里插入图片描述

(三)偷懒

就这样了,因为别人🔗openai.wiki 的文章真的写的很清楚很详实了,希望详细了解就去看看呗。

### 如何启动 Stable-Diffusion-WebUI 要成功启动 **Stable-Diffusion-WebUI**,需要遵循一系列特定的操作流程。以下是详细的说明: #### 1. 环境准备 确保已安装所需的依赖项以及满足最低硬件需求。根据引用的内容可知,Python 版本应为 3.10[^4],PyTorch 和 CUDA 的版本也需匹配当前模型的需求[^2]。 #### 2. 安装与配置 如果尚未完成项目的克隆和初始化操作,则可以通过以下命令获取最新版的 `stable-diffusion-webui` 并设置运行环境: ```bash git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.git cd stable-diffusion-webui ``` 接着,按照官方文档或其他资源指示来下载预训练模型文件并放置到指定位置 `/root/stable-diffusion-webui/models/Stable-diffusion/` 中[^1]。 #### 3. 启动脚本执行 进入项目根目录后,可以使用如下命令启动服务: ```bash ./webui.sh ``` 对于 Windows 用户而言,可能需要用 PowerShell 或 CMD 执行对应的批处理文件: ```batch start.bat ``` 当首次运行时,程序会自动检测缺失组件并尝试安装它们;此过程可能会花费一些时间取决于网络状况和个人设备性能表现情况[^3]。 #### 4. 访问界面 一旦服务器正常工作起来之后,默认情况下应该能够通过浏览器访问地址 http://localhost:7860 来查看图形化用户界面(UI)[^5]。 --- ### 注意事项 - 如果遇到任何错误提示,请仔细阅读终端打印出来的日志信息以便定位具体问题所在。 - 对于高级功能模块(如 LoRA、ControlNet),记得将其对应权重文件存放到相应子目录下,并重新加载应用以使更改生效。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值