stable diffusion生成教程入門

本教程講解如何使用SD生成想要的效果,針對剛安裝AI繪畫但是生成的圖片不滿意的小伙伴
目錄:
1,TAG基本操作
2,模型以及Lora的下載和使用
3,ControlNet的基本使用
4,如何生成更好的圖片以及圖片生成出現(xiàn)問題的解決方案
5,模型推薦
1,TAG基本操作
加權{{1girl}}
減權[[1girl]]
括號內部的TAG數(shù)量以及嵌套沒有限制,非?;镜斜匾f一下,將tag復制幾份也可以起到加權的效果,權重越大的tag,生成時就越容易出現(xiàn)該元素

第五個按鈕:保存tag,可以在下面的Styles列表找到加載
第四個按鈕:把選中的Styles在以tag的形式復制回去
第三個下面有說,剩下的用處不是很大
2,模型以及Lora的下載和使用
模型下載網站:https://civitai.com/

根據(jù)模型下載的頁面右側的列表即可區(qū)分模型的類型
lora:放在stable diffusion根目錄\models\Lora
checkpoint merge:放在stable diffusion根目錄\models\Stable-diffusion
這兩個模型是最常用的類別,網站上這兩種模型也是最多的,也有其他的,如超網格,美學漸變等,如果你感興趣,可以在這里了解
如何使用模型 ·https://github.com/civitai/civitai/wiki/How-to-use-models
checkpoint merge的使用:webUI的左上角

Lora的使用:

點擊一個lora之后,會出現(xiàn)一個Tag,
比如?<lora:ArknightsNian_20:1>
其中后面就是lora的權重,lora的使用數(shù)量沒有限制,不過權重一般不推薦拉太高,會導致一些形變,除非詳情里特別標注,大部分lora都推薦0.6左右
如果沒有按鈕嘗試更新WebUI,Lora是內置的插件(如果你看了別的教程叫你安裝additional-networks,這個是過時的lora使用方式,不用安裝)

3,ControlNet的基本使用

點擊右上擴展,可用,“加載自”按鈕即可顯示可安裝插件
安裝插件sd-webui-controlnet以及openpose-editor

安裝好后來到已安裝點擊應用并重啟用戶界面
然后我們要下載一個模型,連接:
https://civitai.com/models/9557/difference-controlnets
這是controlnet的依賴模型,想使用插件就必須下載

由于我們是要使用骨骼功能所以點擊openpose這個版本
一定要放到這里:
stable diffusion根目錄\extensions\sd-webui-controlnet\models
到這里就安裝完成了,接下來是如何使用:
openpose-editor選項,擺一個骨骼然后導出圖片

按照圖下設置生成圖片即可完成

Preprocessor:會把controlnet里的圖片預先處理為Preprocessor里選項的格式再生成,比如法線深度骨骼草圖什么的,這里我們是現(xiàn)成的骨骼,所以選為none
模型:這里就是我們剛才下載的controlnet的依賴模型,把controlnet里的圖片按照骨骼的方式處理生成圖片,其他controlnet的依賴模型同理
Weight:權重。Guidance strength:引導強度。
如果生成的圖片姿勢不符合骨骼或者過于符合可以調整
4,如何生成更好的圖片以及圖片生成出現(xiàn)問題的解決方案

去C站復制tag,負面tag很重要,可以過濾很多低質量的tag,如果里面用了lora一般要刪除手動導入,因為里面可能用的是舊版的lora
圖片生成慢的話可以調整分辨率和Sampling steps(步數(shù))會影響生成質量
Hires. fix功能:

提升圖像分辨率,讓圖片更加清楚有更多細節(jié),但是有時候會導致本來正常他圖片出現(xiàn)異常,比如多個胳膊腿什么的
生成過程的預覽是正常的,但是最后幾步人物突然扭曲怎么辦?
這里一般是權重過大的問題,可以調整lora的權重或者CFG Scale
CFG Scale可以理解為直接調整全部Tag的權重
生成的分辨率可能導致人體扭曲,甚至同樣的長寬比直接放大也可能導致問題
大部分都是使用512x512的學習資料集,模型介紹里的預覽圖的分辨率通常是學習資料集的分辨率,也就是在這個分辨率下理論上這個模型表現(xiàn)最好
如果生成的圖片有瑕疵可以使用局部重繪功能
想要和一張圖類似的圖片可以用以圖生圖
5,模型推薦
checkpoint merge
AbyssOrangeMix2 - Hardcore:偏向動漫的NSFW模型
Kotosmix:偏向歐美的NSFW模型

ChilloutMix:寫實向照片模型,Korean Doll等lora的底包

Pastel-Mix:粉彩混合
這種模型比較大,不建議下太多,就算下多了也不一定經常用
Lora:主要推薦通用性較強用來混合風格的

Helltaker LoRA:這個Lora在低權重下可以實現(xiàn)原畫的描邊效果,高權重可以還原Helltaker的風格,并且對手部似乎有著更好的效果

Genshin Impact Model Style LoRA:原神三渲二風格

Fast Food Girl Made of Jelly:果凍女孩,用于混合,讓二次元風格的圖片有更多細節(jié)

Plastiq:手辦風格,也是用來混合的

Children's Drawing LoRa:兒童涂鴉風格,挺靈魂的反正
本教程就先到這里,主要講了一些AI畫圖中的技術點,有一些在我看的教程里似乎提到的不是很多,希望可以幫助到一些對AI繪圖感興趣的小伙伴,如果這個教程幫助到了你可以點個贊