ControlNet简述:

ControlNet用于提取图片中关键信息,比如图片中角色的姿势,轮廓以及角色所在的大概区域(不限于角色)
ControlNet可以提取参考图中的重要特征,并以一定权重影响你的图片生成,进而控制角色的姿势、模样、所处位置等内容。

ControlNet安装:

方法一:

步骤:

1.配置环境

访问网站GitHub(Mikubill/sd-webui-controlnet):
https://github.com/Mikubill/sd-webui-controlnet
tips:若网站无法打开,请使用科学上网工具

进入网站后向下滚动,至”Install“
Install下即为安装步骤,复制安装代码(如下图)image.png
可能有9年义务教育的漏网之鱼难以看懂,故此汉化之(如下图)
image.png
为免小伙伴们识屏,故将安装代码奉上!gradio:pip install gradio==3.16.2

进入路径“H:\NovelAi\novelai-webui-aki-v2”
路径解析:“H:\“为我的盘符路径,此处为NovelAi的安装盘
“NovelAi\”为本君H盘下的一个文件夹,为NovelAi的安装路径
“novelai-webui-aki-v2”此路径位于“NovelAi\”中,双击进入“NovelAi\”后便能看到该文件夹

点击地址栏空白处,输入“cmd”或”power shell“进入命令提示符,
在此处进入cmd可以省略多余的命令:
”H:“
”cd “H:\NovelAi\novelai-webui-aki-v2”
image.png

在cmd中输入安装代码即可

进入网页Stable Diffusion,点击extensions(扩展)
点击available(可用)再点击下方的Load from(加载自)
image.png

使用Ctrl+F快捷键查找关键字“control”,查找到名带“ControlNet”的插件后点击Install进行安装ControlNet

接下来下载ControlNet的算法模型
访问网站:ControlNet模型下载(Hugging Face):https://huggingface.co/Hetaneko/Controlnet-models/tree/main/controlnet_safetensors

点击下载(建议全部下载,以便以后使用,当然,硬盘容量小的便只用下自己想用的模型,关于一下模型的介绍在文章后面)
image.png

以上文件应当下载到路径“H:\NovelAi\novelai-webui-aki-v2\extensions\sd-webui-controlnet\models”中(路径解析还请向上滚)
tips:若extensions中无“sd-webui-controlnet”文件夹,则为ControlNet未安装成功,可以尝试重启Stable Diffusion再次进入extensions(扩展)找到ControlNet再次安装

下载成功后回到Stable Diffusion中可以看到“ControlNet”
image.png
点击展开即可使用相关功能

2.参数介绍

参考大佬的视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 04:47】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=287

方法二:

1.ControlNet安装

将ControlNet安装网址输入到“扩展”中的“从网址安装”中:
https://jihulab.com/hunter0725/sd-webui-controlnet
魔法进阶之ControlNet - 图7

2.预处理模型安装

预处理模型(annotator)下载链接:
百度网盘链接:https://pan.baidu.com/s/1XTLS8Y5y09VWLAGGSPL-Fw?pwd=yj3l提取码:yj3l

阿里云盘链接:
(下载后运行该自解压文件):
annotator.exe https://www.aliyundrive.com/s/4HdAH3eqheL点击链接保存,或者复制本段内容,打开「阿里云盘」APP ,无需下载极速在线查看,视频原画倍速播放。

预处理模型安装地址:
主目录\extensions\sd-webui-controlnet\annotator

3.ControlNet模型下载

将要下载的模型可以自选下载,但在一定程度上要求“成双成对”,比如:下载了“canny”预处理模型,那么就要下载相应的“canny”模型。
魔法进阶之ControlNet - 图8

Controlnet模型下载地址:https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main

Controlnet模型安装目录:
主目录\extensions\sd-webui-controlnet\models

注:(若无“sd-webui-controlnet”文件夹,则说明第一步未成功,请重复第一步)

以上所示链接:
从网址安装:https://jihulab.com/hunter0725/sd-webui-controlnet
预处理模型下载链接:https://pan.baidu.com/s/1XTLS8Y5y09VWLAGGSPL-Fw?pwd=yj3l 提取码:yj3l
预处理模型安装地址:主目录\extensions\sd-webui-controlnet\annotator
Controlnet模型下载地址: https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
Controlnet模型安装地址:主目录\extensions\sd-webui-controlnet\models)

preprocesseor介绍:

参考视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 10:39】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=639

ControlNet使用示例:

参考视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 10:39】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=639


此笔记文字化了B站up主StarPorridge小粥的视频:
【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c

在此多谢up了!
UP主页:
StarPorridge小粥的个人空间-StarPorridge小粥个人主页-哔哩哔哩视频

视频中的链接:
ControlNet安装(GitHub): https://github.com/Mikubill/sd-webui-controlnet/discussions
ControlNet模型下载(Hugging Face):https://huggingface.co/Hetaneko/Controlnet-models/tree/main/controlnet_safetensors
Counterfeit模型下载(C站):https://civitai.com/models/4468/counterfeit-v25
神里绫华[Lora]:https://civitai.com/models/9192/kamisato-ayaka-or-genshin-impact stable-diffusion (GitHub):https://github.com/AUTOMATIC1111/stable-diffusion-webui ControlNet论文及示例(阐述ControlNet实现原理):https://github.com/lllyasviel/ControlNet
人体姿态模板下载(星空视频分享链接):https://style-img-1316129201.cos.ap-shanghai.myqcloud.com/pose/4PGjFvX.png

分类:
image.png