前言

在進(jìn)行LORA訓(xùn)練前，第一步工作就是準(zhǔn)備訓(xùn)練使用的數(shù)據(jù)集。在這過程中，有許多需要注意的地方。

1 圖片選擇

訓(xùn)練使用的圖片質(zhì)量很大程度決定了訓(xùn)練出來模型的好壞，所以在圖片的選擇也需要注意。

（1）面部細(xì)節(jié)清晰，不模糊。

（2）準(zhǔn)備同一人物不同姿勢、不同衣服、不同表情的圖片，且數(shù)量相同，以保證權(quán)重一致。正面臉部圖片可以適當(dāng)多些。

（3）整個(gè)數(shù)據(jù)集中，臉部照片：全身照片的比例控制在3：1左右，臉部圖片不能有遮擋。

（4）在圖片質(zhì)量較好的情況下，不要使用太多的圖片（大概20張左右就好），以免學(xué)習(xí)次數(shù)過多導(dǎo)致模型過擬合。

（5）因?yàn)槲覀冃枰氖侨宋?，所以圖片中的背景越簡單越好?？梢允褂靡韵戮W(wǎng)址對(duì)人物進(jìn)行摳圖處理。

https://www.pickwant.com/home

（6）Stable Diffusion中的圖片預(yù)處理工具裁剪圖片時(shí)可能會(huì)把臉裁一半，所以盡量還是自己來裁剪圖片?？梢允褂靡韵戮W(wǎng)站

https://www.birme.net/

這個(gè)是國內(nèi)的鏡像

https://www.onlinephotosoft.com/zh-CN/birme/

2 圖片打標(biāo)

因?yàn)轭A(yù)處理工具有自動(dòng)打標(biāo)的功能，所以很多up都是在已經(jīng)存在某些標(biāo)簽的情況下說明如何刪除標(biāo)簽。但我個(gè)人認(rèn)為按照沒有任何標(biāo)簽，再慢慢加標(biāo)簽的方式來說明可能更好理解一些。所以我在這里按照我的理解再說明一下圖片標(biāo)簽的作用以及刪除增加的原則。

以這張八重神子的圖片舉例。

如果這張圖片我們什么標(biāo)簽都不加，那么就相當(dāng)于告訴AI說這張圖片就是八重神子，以后我們加載lora的時(shí)候就把這張圖片的所有元素都加載進(jìn)去。

很顯然，這并不符合我們的期望，因?yàn)檫@張圖片下面和右上有問題，我們需要的只是神子這個(gè)人物，并不需要文字，所以我們需要把“l(fā)ogo”這個(gè)標(biāo)簽加上，告訴AI這張圖片里面有“l(fā)ogo”這個(gè)元素。下次加載這個(gè)lora時(shí)，如果我沒有添加“l(fā)ogo”這個(gè)tag，那么出圖的時(shí)候就不要添加這些文字。

更進(jìn)一步，如果我想給神子換衣服，那么我們就要添加“kimono”和服這個(gè)標(biāo)簽，把“和服”這個(gè)概念從“神子”這個(gè)整體概念中分離出來。

然后我們反向舉一個(gè)例子，如果打標(biāo)工具識(shí)別出“fox ear”或者“animal ears”這兩個(gè)標(biāo)簽，那么我們就要手動(dòng)刪除這兩個(gè)標(biāo)簽。因?yàn)樯褡泳褪亲詭Ш偠涞?，要是沒有狐貍耳朵拿還能叫神子嗎？

然后有同學(xué)可能要說了，那如果我不刪除“fox ear”這個(gè)標(biāo)簽，出圖的時(shí)候都把這個(gè)標(biāo)簽加上可不可以？

答案是不可以。

先不說這樣操作多此一舉，毫無意義，就是單從出圖的效果上來說，也不可以。

因?yàn)樵贏I的認(rèn)識(shí)里，“fox ear”其實(shí)是一個(gè)很大的范圍，如果你在出圖的時(shí)候添加“fox ear”標(biāo)簽，那么它會(huì)將它認(rèn)識(shí)里的“fox ear”（神子的“fox ear”只是這個(gè)概念的一部分）做輸出，最后出來的就不是神子的“fox ear”了。