Anything-V3.0.ckpt測(cè)評(píng),色調(diào)灰暗解決辦法
最近在玩ai繪圖,一開(kāi)始是玩novelaileak模型,最近在很多地方看到了
全球各地的小伙伴們通過(guò)dreambooth自發(fā)訓(xùn)練的很多模型,
接觸了許多各種風(fēng)格的hypernetwork、embeddings,感受到世界各地的訓(xùn)練者百花齊放的積極性,各種新的pt文件層出不窮,
模型方面,最早接觸到的是一個(gè)叫做momoko的自訓(xùn)練模型,
然后開(kāi)始接觸到quan、hito5k、mocha,然后是momoko+mocha融合模型
然后也開(kāi)始自己學(xué)習(xí)模型融合,
昨天早上開(kāi)始高頻率的聽(tīng)說(shuō)到“anything”模型,在幾個(gè)大群,都傳聞是”新的官方模型”
我一開(kāi)始也抱著它是新的官方模型的心理去積極嘗試了~
因?yàn)樗c其他自訓(xùn)練模型不同的點(diǎn)在于它有著和官方模型一樣的7G大小,
再加上具體的來(lái)源不是很明確,人云亦云就變成了 新官方模型 的說(shuō)法
不過(guò)我經(jīng)過(guò)了解,應(yīng)該是一個(gè)叫做九佬的大佬,用官方模型作為基礎(chǔ),對(duì)模型進(jìn)行大量增量融合形成的萬(wàn)物熔爐模型~
說(shuō)一說(shuō)體驗(yàn)的感受,不太清楚模型具體經(jīng)歷了幾次融合以及每次的比例,但出圖的質(zhì)量是挺高的,這是一個(gè)網(wǎng)友進(jìn)行的測(cè)評(píng): https://www.bilibili.com/read/cv19603218
Anything-V3.0.ckpt模型不加載vae權(quán)重,會(huì)出現(xiàn)顏色發(fā)灰的問(wèn)題,
是否載入vae,在不同的模型下,會(huì)出現(xiàn)不同的效果,
如果是novelai的animefull-latest.ckpt,不載入畫(huà)面色調(diào)會(huì)更加艷麗,載入會(huì)讓畫(huà)面不那么艷麗
而在anythings模型中,同樣的vae起到的是方向相反的效果,
我不太懂vae權(quán)重的具體原理,但它在不同模型的表現(xiàn),應(yīng)該是起到動(dòng)態(tài)平衡整體顏色、飽和度等參數(shù)的效果
如何解決?
劃重點(diǎn):

需要載入vae.pt,
載入方法,將vae復(fù)制到與ckpt同一個(gè)路徑下,

如何確定載入是否成功?
觀察啟動(dòng)的日志,載入vae時(shí),會(huì)有一行類(lèi)似
”load weight from vae“的字樣,出現(xiàn)代表成功加載vae
效果可以很直觀的通過(guò)視覺(jué)感知出來(lái)
多模型玩家,可以使用webui內(nèi)部設(shè)置進(jìn)行vae載入

效果對(duì)比:


效果對(duì)比(from群友)


題外話
參數(shù)不是固定某個(gè)就是最好,而是適合自己的是最好
不一定非要按照某種正確組合,可以自己挖掘更好玩更適合你自己的參數(shù)設(shè)置。
另外請(qǐng)?jiān)谟?xùn)練embedings和heypernetwork的時(shí)候,取消加載vae,
避免訓(xùn)練出來(lái)的pt文件套上了2層vae效果,會(huì)讓使用者無(wú)法使用(顏色混亂)