ControlNet简述:
ControlNet用于提取图片中关键信息,比如图片中角色的姿势,轮廓以及角色所在的大概区域(不限于角色)
ControlNet可以提取参考图中的重要特征,并以一定权重影响你的图片生成,进而控制角色的姿势、模样、所处位置等内容。
ControlNet安装:
方法一:
步骤:
1.配置环境
访问网站GitHub(Mikubill/sd-webui-controlnet):
https://github.com/Mikubill/sd-webui-controlnet
tips:若网站无法打开,请使用科学上网工具
进入网站后向下滚动,至”Install“
Install下即为安装步骤,复制安装代码(如下图)
可能有9年义务教育的漏网之鱼难以看懂,故此汉化之(如下图)
为免小伙伴们识屏,故将安装代码奉上!gradio:pip install gradio==3.16.2
进入路径“H:\NovelAi\novelai-webui-aki-v2”
路径解析:“H:\“为我的盘符路径,此处为NovelAi的安装盘
“NovelAi\”为本君H盘下的一个文件夹,为NovelAi的安装路径
“novelai-webui-aki-v2”此路径位于“NovelAi\”中,双击进入“NovelAi\”后便能看到该文件夹
点击地址栏空白处,输入“cmd”或”power shell“进入命令提示符,
在此处进入cmd可以省略多余的命令:
”H:“
”cd “H:\NovelAi\novelai-webui-aki-v2”
在cmd中输入安装代码即可
进入网页Stable Diffusion,点击extensions(扩展)
点击available(可用)再点击下方的Load from(加载自)
使用Ctrl+F快捷键查找关键字“control”,查找到名带“ControlNet”的插件后点击Install进行安装ControlNet
接下来下载ControlNet的算法模型
访问网站:ControlNet模型下载(Hugging Face):https://huggingface.co/Hetaneko/Controlnet-models/tree/main/controlnet_safetensors
点击下载(建议全部下载,以便以后使用,当然,硬盘容量小的便只用下自己想用的模型,关于一下模型的介绍在文章后面)
以上文件应当下载到路径“H:\NovelAi\novelai-webui-aki-v2\extensions\sd-webui-controlnet\models”中(路径解析还请向上滚)
tips:若extensions中无“sd-webui-controlnet”文件夹,则为ControlNet未安装成功,可以尝试重启Stable Diffusion再次进入extensions(扩展)找到ControlNet再次安装
下载成功后回到Stable Diffusion中可以看到“ControlNet”
点击展开即可使用相关功能
2.参数介绍
参考大佬的视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 04:47】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=287
方法二:
1.ControlNet安装
将ControlNet安装网址输入到“扩展”中的“从网址安装”中:
https://jihulab.com/hunter0725/sd-webui-controlnet
2.预处理模型安装
预处理模型(annotator)下载链接:
百度网盘链接:https://pan.baidu.com/s/1XTLS8Y5y09VWLAGGSPL-Fw?pwd=yj3l提取码:yj3l
阿里云盘链接:
(下载后运行该自解压文件):
annotator.exe https://www.aliyundrive.com/s/4HdAH3eqheL点击链接保存,或者复制本段内容,打开「阿里云盘」APP ,无需下载极速在线查看,视频原画倍速播放。
预处理模型安装地址:
主目录\extensions\sd-webui-controlnet\annotator
3.ControlNet模型下载
将要下载的模型可以自选下载,但在一定程度上要求“成双成对”,比如:下载了“canny”预处理模型,那么就要下载相应的“canny”模型。
Controlnet模型下载地址:https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
Controlnet模型安装目录:
主目录\extensions\sd-webui-controlnet\models
注:(若无“sd-webui-controlnet”文件夹,则说明第一步未成功,请重复第一步)
以上所示链接:
从网址安装:https://jihulab.com/hunter0725/sd-webui-controlnet
预处理模型下载链接:https://pan.baidu.com/s/1XTLS8Y5y09VWLAGGSPL-Fw?pwd=yj3l 提取码:yj3l
预处理模型安装地址:主目录\extensions\sd-webui-controlnet\annotator
Controlnet模型下载地址: https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
Controlnet模型安装地址:主目录\extensions\sd-webui-controlnet\models)
preprocesseor介绍:
参考视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 10:39】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=639
ControlNet使用示例:
参考视频:【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 【精准空降到 10:39】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c&t=639
此笔记文字化了B站up主StarPorridge小粥的视频:
【【赛博Coser】《超详细》ControlNet拆解教学,让你彻底理解AI绘画的精髓】 https://www.bilibili.com/video/BV16j411379n/?share_source=copy_web&vd_source=b0637cf166bb55cd43f179bd22f8d15c
在此多谢up了!
UP主页:
StarPorridge小粥的个人空间-StarPorridge小粥个人主页-哔哩哔哩视频
视频中的链接:
ControlNet安装(GitHub): https://github.com/Mikubill/sd-webui-controlnet/discussions
ControlNet模型下载(Hugging Face):https://huggingface.co/Hetaneko/Controlnet-models/tree/main/controlnet_safetensors
Counterfeit模型下载(C站):https://civitai.com/models/4468/counterfeit-v25
神里绫华[Lora]:https://civitai.com/models/9192/kamisato-ayaka-or-genshin-impact stable-diffusion (GitHub):https://github.com/AUTOMATIC1111/stable-diffusion-webui ControlNet论文及示例(阐述ControlNet实现原理):https://github.com/lllyasviel/ControlNet
人体姿态模板下载(星空视频分享链接):https://style-img-1316129201.cos.ap-shanghai.myqcloud.com/pose/4PGjFvX.png
分类: