AI繪畫 新多功能controlnet插件,草圖上色,動作骨架提取等功能,安裝及下載教程

功能很多,都非常實用,文生圖添加人物動作,線稿上色,景深等
個人經驗,很菜不懂電腦,只做最基本使用的介紹
webui要比較新版的,大概2月份以后,本人使用2.05,似乎2.01更好點,推薦?秋葉aaaki 的啟動器來更新,如果出現(xiàn)出圖的時候卡了半天的情況,可能是在下載什么東西,下好了就行了
1.安裝
https://github.com/Mikubill/sd-webui-controlnet 先是這個網站,(打開webui)把它

如上圖,作者給出了下載方法。
如果沒弄清楚,就是說打開webui,把這個網址復制到 擴展欄的install from URL 的第一行,點install即可
如果沒梯子或者莫名其妙的原因安裝失?。ㄎ揖褪?/p>
就在這里


解壓,將文件夾放在這個位置

然后重新加載或重新啟動webui
2.下載模型
https://huggingface.co/toyxyz/Control_any3


模型注釋(機翻,大致上介紹功能):
?
ControlNet/models/control_sd15_canny.pth
ControlNet+SD1.5 模型,用于使用精明邊緣檢測來控制 SD。
ControlNet/models/control_sd15_depth.pth
ControlNet+SD1.5模型使用Midas深度估計來控制SD。
ControlNet/models/control_sd15_hed.pth
ControlNet+SD1.5 型號使用 HED 邊緣檢測(軟邊緣)控制 SD。
ControlNet/models/control_sd15_mlsd.pth
ControlNet+SD1.5模型使用M-LSD線檢測來控制SD(也可以與傳統(tǒng)的Hough變換一起使用)。
ControlNet/models/control_sd15_normal.pth
ControlNet+SD1.5 模型使用法線貼圖控制 SD。最好使用該 Gradio 應用程序生成的法線貼圖。只要方向正確,其他法線貼圖也可以工作(左邊看紅色,右邊看藍色,上看綠色,下看紫色)。
ControlNet/models/control_sd15_openpose.pth
ControlNet+SD1.5 模型,使用 OpenPose 姿勢檢測控制 SD。直接操縱姿勢骨架也應該有效。
ControlNet/models/control_sd15_scribble.pth
ControlNet+SD1.5模型使用人類涂鴉控制SD。該模型使用邊界邊緣進行訓練,具有非常強大的數(shù)據(jù)增強功能,以模擬類似于人類繪制的邊界線。
ControlNet/models/control_sd15_seg.pth
ControlNet+SD1.5模型使用語義分割來控制SD。協(xié)議是ADE20k。
選擇要使用的模型下好,目前最實用的大概為
ControlNet/models/control_sd15_openpose.pth 動作提?。ㄗ⒁庹嫒藞D片能更有效),也可以自己畫線條,可以很方便的定制動作
以及ControlNet/models/control_sd15_canny.pth 線稿上色
將下好的模型放置于此處

3.使用
打開webui
打開這里,沒有的話就是沒下好?

出現(xiàn)這個界面

大致調用下方紅圈幾項即可使用,【不生效的話,嘗試勾選Low VRAM (8GB or below)】

注意,如果出現(xiàn)模型無法讀取,Model欄為空白,一般是webui版本跟不上,它讀不出來,請更新webui
有的模型(指跑圖用的模型)是不受這個插件影響的,請注意。推薦用a3測試是否可用,再換別的模型
這是機翻版本的界面

出圖這部分照常使用,輸入你想要的東西

如果出現(xiàn)出圖的時候卡了半天的情況,可能是版本對不上,在下載什么東西,下好了就行了
完成,下面兩張是動作提取的效果


大致就是這樣
關于不生效的總結:
1.webui版本跟不上,需要的特殊模型無法讀取,更新到大概2月份后版本
2..顯存小,勾選Low VRAM (8GB or below)
3.使用的出圖模型不受影響,請更換A3嘗試,如果還不生效,請查看上兩條
4.enable忘記勾了,我玩lora就老是忘勾這個