PS創(chuàng)成式填充平替:Stable Diffusion ControlNet擴(kuò)圖功能詳解
前言
前不久講了Photoshop beta版的生成式填充擴(kuò)圖功能,那么有沒(méi)有平替方案呢?答案是有的,今天好奇君就來(lái)演示下如何用Stable Diffusion來(lái)實(shí)現(xiàn)類(lèi)似的擴(kuò)圖功能。
Start→
升級(jí)ControlNet插件
首先我們要把ControlNet插件升級(jí)到最新版本,在擴(kuò)展中點(diǎn)擊檢查更新,應(yīng)用并重啟升級(jí)即可。
lama預(yù)處理器和inpaint模型的下載安裝
然后我們需要下載ControlNet插件的lama預(yù)處理器和inpaint模型,見(jiàn)視頻。
預(yù)處理器和模型分別放到如下圖所示的位置。
下面開(kāi)始擴(kuò)圖的具體操作
重啟WebUI,來(lái)到圖生圖界面,上傳一張圖,然后點(diǎn)擊DeepBooru反推提示詞。
把反推出的提示詞復(fù)制到文生圖界面。
然后下拉打開(kāi)ControlNet,繼續(xù)上傳剛才的圖片。
點(diǎn)擊“啟用”-局部重繪,選擇“inpaint_only+lama”預(yù)處理器,模型會(huì)自動(dòng)選擇inpaint模型。
畫(huà)面縮放模式記得選擇“Resize and Fill(縮放后填充空白)”,這是關(guān)鍵一步,這樣才能起到擴(kuò)圖的作用。
控制模式選擇“更偏向ControlNet”,勾選“pixel perfect”像素完美模式。
接著啟用第二個(gè)ControlNet,依然上傳同樣的圖片,選擇“reference_only”預(yù)處理器,然后調(diào)整Style Fidelity這個(gè)參數(shù)(僅在均衡模式有效,請(qǐng)務(wù)必記得勾選Balanced均衡模式!),數(shù)值越大代表生成的圖片與參考圖風(fēng)格越像,用此預(yù)處理器來(lái)確保擴(kuò)圖的風(fēng)格一致性。
接著修改分辨率的比例,原圖的分辨率為1:1,這里改為16:9的分辨率,這樣才能起到擴(kuò)圖的作用。
準(zhǔn)備生成
選擇合適的大模型、提示詞等,如圖所示,然后點(diǎn)擊生成。
稍等片刻,我們便可以查看擴(kuò)圖的生成結(jié)果了。我們可以多生成幾次,從中找到比較滿(mǎn)意的擴(kuò)圖。
怎么樣?擴(kuò)圖效果還可以吧,快去跟著教程試試吧!
作為Photoshop 人工智能版的創(chuàng)成式填充的替代解決方案還是有其優(yōu)勢(shì)性的。
因?yàn)镻hotoshop的AI運(yùn)算是在A(yíng)dobe云端進(jìn)行的,這勢(shì)必會(huì)出現(xiàn)各種由于網(wǎng)絡(luò)、地區(qū)限制等問(wèn)題而無(wú)法使用的情況。
而Stable Diffusion由于是在本地部署運(yùn)行的,不用擔(dān)心這些問(wèn)題!提高了擴(kuò)圖的可靠性!
以上便是inpaint_only+lama擴(kuò)圖功能的演示。
更多教程請(qǐng)看本人主頁(yè)@好奇漫步,持續(xù)更新更多Ai相關(guān)學(xué)習(xí)教程,保持關(guān)注哦~