Controlnet更新插件,新功能:顏色和樣式
首先感謝
環(huán)球搬磚可因提供的原味視頻:當(dāng)時(shí)連字幕都沒有,聽的我頭大。
教程中的正則化圖片為無版權(quán)圖片庫Pixabay下載,文中僅供教學(xué)使用,非盈利商用。
——————————————————————————————————
一、安裝部分Controlnet安裝(如果您之前已經(jīng)安裝過了,該段可以跳過直接從二更新插件安裝開始看):
-----------------------------------
sd-webui-controlnet安裝基礎(chǔ)教程:
1,插件安裝:
webui啟動(dòng)后在擴(kuò)展菜單欄目里,選擇從網(wǎng)址安裝:
https://jihulab.com/hunter0725/sd-webui-controlnet
安裝完畢后,先關(guān)閉webui
之后開始sd-webui-controlnet模型的安裝部分:
2,首先是annotator預(yù)處理模型:
訪問:
https://huggingface.co/lllyasviel/ControlNet/tree/main/annotator/ckpts
在
stable-diffusion-webui(你的主程序文件夾)\extensions\sd-webui-controlnet\annotator\openpose
下放置
body_pose_model.pth
hand_pose_model.pth
在
stable-diffusion-webui(你的主程序文件夾)\extensions\sd-webui-controlnet\annotator\midas
下放置
dpt_hybrid-midas-501f0c75
然后是:
3,檢測模型的安裝
喜歡占地方大的(不推薦):https://huggingface.co/lllyasviel/ControlNet/tree/main/models
喜歡精簡模型的:
https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
https://huggingface.co/TencentARC/T2I-Adapter/tree/main/models
下載后放在
stable-diffusion-webui(你的主程序文件夾)\extensions\sd-webui-controlnet\models
——————————————————————————————————
二、更新插件安裝部分 :
1更新插件
更新你的sd-webui-controlnet到最新版本,秋葉啟動(dòng)器或者星空啟動(dòng)器,對(duì)插件進(jìn)行更新
或者?【此處感謝 藍(lán)莓的指導(dǎo)】
(先備份你下好的所有模型文件 記住,僅僅是模型)直接進(jìn)入
stable-diffusion-webui(你的主程序文件夾)\extensions
在地址欄(如果你不懂什么叫地址欄請(qǐng)去搜搜百度。)
輸入cmd
黑色屏幕中輸入git?clone?https://jihulab.com/hunter0725/sd-webui-controlnet
2下載模型
在
https://huggingface.co/TencentARC/T2I-Adapter/tree/main/models
需要的新模型
t2iadapter_color_sd14v1.pth? ?實(shí)現(xiàn)顏色
t2iadapter_style_sd14v1.pth? ?實(shí)現(xiàn)風(fēng)格
下載后放在
stable-diffusion-webui(你的主程序文件夾)\extensions\sd-webui-controlnet\models
初次啟動(dòng)style時(shí)會(huì)下載一個(gè)1.71g的文件,我也不清楚是什么可能是依賴支持。
——————————————————————————————————
三、使用及注意事項(xiàng)?:
1.用于上傳到controlnet的正則化圖片,請(qǐng)盡量保證1:1(而且可能需要是64的倍數(shù))
2.t2iadapter_style_sd14v1?(風(fēng)格渲染)

preprocessor下
選擇:clip_vision
t2iadapter_style_sd14v1
右邊的model選擇t2iadapter_style_sd14v1
即可進(jìn)行風(fēng)格渲染
會(huì)使tag生成的的圖片渲染成上傳正則化圖像的風(fēng)格效果
渲染效果的強(qiáng)弱:
調(diào)整guidance start滑塊(中間那個(gè))
它影響的是渲染效果啟動(dòng)的時(shí)間。
簡單的來說,在不調(diào)整右側(cè)的end滑塊情況下
guidance start滑塊(中間那個(gè))數(shù)值越小,對(duì)畫面的影響幅度越大(啟動(dòng)越早)
2.t2iadapter_color_sd14v1 (顏色渲染)

preprocessor下
選擇:color
右邊的model選擇t2iadapter_color_sd14v1
即可進(jìn)行顏色渲染
會(huì)使tag生成的的圖片渲染成上傳正則化圖像的顏色效果
對(duì)比效果:

風(fēng)格化渲染的影響


顏色渲染效果:

0,2滑塊開始渲染后的效果

0,5滑塊開始渲染后的效果
——————————————————————————————————
四、?:圖生圖狀態(tài)下的結(jié)果:

五、?:注意事項(xiàng):
顏色渲染一樣會(huì)影響畫風(fēng)
目前版本bug較多,有可能出現(xiàn)無效情況
環(huán)球搬磚可因的說法是可以一次產(chǎn)倆圖試試來保證效果。