本文以專(zhuān)欄的形式對(duì)我的喜灰背景畫(huà)風(fēng)Lora訓(xùn)練過(guò)程做一個(gè)記錄、整理。

這是我第一次訓(xùn)練畫(huà)風(fēng)Lora。實(shí)際上，《喜羊羊與灰太狼》的背景和人物的畫(huà)風(fēng)是不同的。理論上我應(yīng)該把兩者全都訓(xùn)練進(jìn)去，但是我在訓(xùn)練集里只放了無(wú)人物的圖片，所以只煉出了畫(huà)背景板的Lora。

訓(xùn)練集：

“二創(chuàng)動(dòng)力”贊助了我397張《喜羊羊與灰太狼》的背景圖片，由于授權(quán)原因，我就不把圖放出來(lái)了。圖片的數(shù)量太多了，有可能只訓(xùn)練了1-2個(gè)epoch就過(guò)擬合了。所以，我對(duì)圖片進(jìn)行了篩選。我先給圖片打標(biāo)，然后通過(guò)代碼刪去了標(biāo)簽數(shù)小于10個(gè)的圖片，以此保證每張用于訓(xùn)練的圖都能表達(dá)足夠多的信息。

篩選之后，還剩下284張圖，分辨率調(diào)為896*512.

后來(lái)我覺(jué)得這種篩選方式也不恰當(dāng)，因?yàn)橛械膱D可能表達(dá)的內(nèi)容很少，但是這個(gè)內(nèi)容很重要。所以最好還是等我有空了之后手動(dòng)篩選。這，將是一個(gè)漫長(zhǎng)而無(wú)聊的過(guò)程~。

我還在標(biāo)簽中加入了幾個(gè)特有概念，希望也能被學(xué)習(xí)到。

訓(xùn)練參數(shù)：

repeat=6，其他如下：

模型測(cè)試：

畫(huà)風(fēng)Lora與角色Lora結(jié)合試驗(yàn)：

最終選擇第4個(gè)，權(quán)重推薦0.5-0.9，可按需調(diào)整。

感覺(jué)已經(jīng)能算一個(gè)合格的畫(huà)風(fēng)Lora了。目前看下來(lái)，這個(gè)模型只能用來(lái)畫(huà)背景板，不能與人物角色Lora結(jié)合使用，否則會(huì)將人物也畫(huà)成背景的風(fēng)格。另外，我加入的幾個(gè)概念，訓(xùn)練效果參差不齊，這跟我訓(xùn)練集里相應(yīng)圖片數(shù)量不同有關(guān)。

效果圖：（均為模型直出，未經(jīng)修圖）

這個(gè)模型還能用來(lái)制作很多有意思的圖。

參考資料：

主流程：BV1Aa4y1M76n

打標(biāo)與概念分類(lèi)：BV12k4y1e7Eo，BV1ZM411c7aj