SD_Multi Diffusion擴(kuò)展使用邏輯與操作界面


本人通過(guò)作者的介紹與網(wǎng)上的學(xué)習(xí),對(duì)Multi Diffusion的操作界面與使用邏輯在此分享給各位,如果有錯(cuò)誤或者遺漏你可以留言告訴我。

感謝Multi diffusion擴(kuò)展的開(kāi)發(fā)者,為我們提供了如此奇妙的功能.
如果你有時(shí)間也可以到:https://github.com/pkuliyi2015/multidiffusion-upscaler-for-automatic1111了解更多Multi diffusion的信息.
一、前言
Multi diffusion你可能不太熟悉,當(dāng)你看到他們兩是不是就有想起來(lái)了.

Tiled Diffusion (平鋪擴(kuò)散)
Tiled AVE (平鋪AVE)
只要用的秋葉整合包打開(kāi)都是安裝好的,該擴(kuò)展能讓我們以更小的內(nèi)存來(lái)完成圖像生成,結(jié)合ControlNet一起用更是錦上添花。
二、操作界面
1.Tiled Diffusion (平鋪擴(kuò)散)

1.1.Enable(啟用): 勾選就是啟用Tiled Diffusion。
1.2.Overwrite image size(覆蓋圖像尺寸):勾選它就能夠做出超出WebUI最大分辨率的限制,做出更大的圖像(達(dá)到超乎你想象)。
1.3.Method(方案):Multidiffusion(多重?cái)U(kuò)散)和mixture of diffusers(混合擴(kuò)散)。
1.4.Latent tile width (空間分塊寬度)和Latent tile height(空間分塊高度):這里的設(shè)置是圖像分辨率除以8(例如:512*512/8).分塊的寬度和高度都設(shè)置在64,作者的推薦是32-160之間,因?yàn)槟壳按蠖鄶?shù)模型出圖的分辨率超出1280出會(huì)出”鬼圖”的概率較大,所以在分辨率也最在1280以?xún)?nèi),后期在做放大處理。
1.5.Latent tile overlap(空間分塊重疊):當(dāng)分塊重疊越高融合的接縫越小,但是多需要的時(shí)間相對(duì)也會(huì)變多,具體的效果與區(qū)別我還沒(méi)測(cè)試出來(lái).作者在這里推薦的參數(shù)是:多重?cái)U(kuò)散(Multidiffusion)使用32或者48,混合擴(kuò)散(mixture of diffusers)使用16或者32。
1.6.Latent tile batch size(空間分塊單批數(shù)量):這里推薦設(shè)置為8,數(shù)值越大出圖越快,如果GPU的VEAM不足時(shí),就把批數(shù)下調(diào)一點(diǎn)(VRAM全稱(chēng):Video Random Access Memory)。
1.7.在圖生圖的界面里,Tiled Diffusion (平鋪擴(kuò)散)會(huì)多出兩個(gè)功能

覆蓋圖像尺寸 變?yōu)?保持輸入圖像尺寸
增加放大算法,與文生圖操作一樣
Tiled Noise Inversion(噪聲反轉(zhuǎn))我還沒(méi)有做測(cè)試,之后又結(jié)果我會(huì)發(fā)出來(lái),有興趣也可以去作者哪里了解一下。
2.?Region prompt control (分區(qū)提示詞控制)文章頂部的圖就是用它做出來(lái)的。

2.1.Enable Control(啟用控制):啟用該控制時(shí)必須也把Tiled Diffusion (平鋪擴(kuò)散)給勾上。
2.2.Draw full canvas background: (繪制完整畫(huà)布背景):在你像偷懶的時(shí)候直接勾上,AI會(huì)自動(dòng)給你畫(huà)出背景圖,有時(shí)候出來(lái)的效果還是很不錯(cuò)的!
2.3.Create txt2img canvas(創(chuàng)建文生圖畫(huà)布):點(diǎn)擊創(chuàng)建按鈕你才能生成畫(huà)布,每次分辨率有更改時(shí),都需要從新點(diǎn)擊一次生成,畫(huà)布的大小才會(huì)改變。記得每次更改分辨都要?jiǎng)?chuàng)建畫(huà)布,重要的事情說(shuō)三遍。

2.4.最多可以添加8個(gè)區(qū)域,類(lèi)型分為background (背景)和foreground(前景),X、Y是畫(huà)布的位置,W、H是畫(huà)布的大小,也可以直接用鼠標(biāo)拖動(dòng)需要改變區(qū)域。
2.5.選擇前景時(shí)會(huì)多出一個(gè)FEATHER(羽毛)的參數(shù),把它作用理解為“羽化”就行,設(shè)置在0.2-0.4效果都挺好。
三、Tiled VAE(平鋪AVE)

它能減少你VRAM的使用量,目前我用的是默認(rèn)大小,快速編碼器和快速解碼器我建議關(guān)閉掉,勾選上的時(shí)候經(jīng)常會(huì)出現(xiàn)奇怪的顏色,我在操作中也會(huì)給大家展示。
四、實(shí)際操作邏輯

操作邏輯我已經(jīng)做成視頻了,你可以直接點(diǎn)擊觀看。
最后感謝你的支持,也感謝開(kāi)發(fā)者為我們做出貢獻(xiàn),如果什么錯(cuò)誤的地方請(qǐng)給我留言。