最美情侣中文字幕电影,在线麻豆精品传媒,在线网站高清黄,久久黄色视频

歡迎光臨散文網(wǎng) 會(huì)員登陸 & 注冊(cè)

[AI繪畫]Embedding/Textual inversion模型訓(xùn)練記錄

2023-08-18 00:28 作者:白修白_BxB  | 我要投稿

前言:

????本人所使用的是秋葉aaaki大佬23年7月左右的Webui整合包進(jìn)行AI訓(xùn)練的,比較適合萌新。

????雖然秋葉大佬已經(jīng)在視頻里進(jìn)行了比較詳細(xì)的教學(xué),但由于是比較早期的Webui,一些操作和布局不太一樣,所以本篇記錄一下自己的訓(xùn)練過程。


1、設(shè)置參數(shù)

  • 首先是啟動(dòng)后頁(yè)面的webui中“設(shè)置”里的“反推設(shè)置”參數(shù)。

反推設(shè)置參數(shù)設(shè)置

????????根據(jù)陳二哈是個(gè)技術(shù)宅大佬視頻所說(https://www.bilibili.com/video/BV1N44y1X71h/?spm_id_from=pageDriver&vd_source=17cf6a5a912b0a39a628030a5814462c),反推設(shè)置里的“評(píng)分閾值”含義:數(shù)字越低則對(duì)訓(xùn)練圖的細(xì)節(jié)保留越多,建議0.7

  • 其次是“設(shè)置”里的“訓(xùn)練”模塊。

訓(xùn)練模塊參數(shù)

????????勾選紅框后防止訓(xùn)練時(shí)候出現(xiàn)顯存不夠爆炸的情況。


2、圖片處理

  • 首先打開“訓(xùn)練”模塊,找到“圖像預(yù)處理”,把所需要訓(xùn)練的圖片源目錄和目標(biāo)目錄填上。

  • 之后設(shè)置寬度高度,本人是3070顯卡,8gb顯存,所以圖片保持512*512,少于8gb的需要調(diào)低,不然爆顯存,具體多低請(qǐng)自己調(diào)試(有人1066 6gb顯存的顯卡調(diào)450*450,可以參考一下)

  • 選項(xiàng)勾選

???????1、一般不勾選“保存原始尺寸”

????? ?2、“創(chuàng)建水平翻轉(zhuǎn)副本”在圖片素材過少的時(shí)候勾選,“過少”本人理解是指只有幾張或者十幾張的時(shí)候。

????? ?3、“分割過大的圖像”一般不選,會(huì)把圖像分割破壞,導(dǎo)致訓(xùn)練效果不理想。

????? ?4、“自動(dòng)面部焦點(diǎn)剪裁”字面意思,把圖片調(diào)整到臉部周圍進(jìn)行裁剪。

????????????其中的參數(shù)“焦點(diǎn)面部權(quán)重”字面意思,越高裁剪部分向臉部越近,低了會(huì)出現(xiàn)截半張臉的情況。其他兩項(xiàng)隨便調(diào)整即可。簡(jiǎn)單來說,三項(xiàng)可以看作調(diào)整裁剪框的上下左右移動(dòng)。想要知道效果如何需要自己調(diào)試幾下。

????? ?5、“自動(dòng)按比例裁剪縮放”字面上是縮放,但是實(shí)際操作無法將所有的圖片都處理,貌似有一個(gè)寬高范圍,并且處理以后的圖片大部分不全是512*512,不推薦使用。

????? ?6、“使用BLIP生成標(biāo)簽(自然語言)”和“使用Deepbooru生成標(biāo)簽”可以隨便用哪個(gè),生成圖片的對(duì)應(yīng)文本標(biāo)簽描述,但是有人反映BLIP可能會(huì)錯(cuò)誤。

????????似乎總結(jié)下來,“自動(dòng)面部焦點(diǎn)裁剪”必選,但是我自己目前也沒玩清楚。

圖像預(yù)處理部分


3、創(chuàng)建嵌入式模型

  • 輸入模型名稱,注意目錄里(sd-webui-aki\embeddings)不能有相同名稱的模型,即使勾選了“覆蓋同名嵌入式模型文件”也沒用,實(shí)測(cè)不會(huì)重新覆蓋。

  • “每個(gè)詞元的向量數(shù)”人物訓(xùn)練為6左右,畫風(fēng)為12左右,圖片越多調(diào)越高。

  • “初始化文本”可不填,網(wǎng)上說是模型調(diào)用的時(shí)候會(huì)調(diào)用里面的初始化文本?

創(chuàng)建嵌入式模型


4、文生圖部分tag設(shè)置

  • 正向tag

????????訓(xùn)練的時(shí)候可以不填很復(fù)雜,一般我用“1girl, high quality,"Embedding模型名字”。這里的"Embedding模型名字”指的是創(chuàng)建模型時(shí)填入的名稱,目的是為了訓(xùn)練過程中的出圖效果能監(jiān)控到。

  • 反向tag

????????我用的為“l(fā)owres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, extra fingers, fewer fingers, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry“。


5、訓(xùn)練模型

  • 準(zhǔn)備階段

????????在訓(xùn)練之前我們需要將網(wǎng)頁(yè)中“外掛VAE模型”選為“無”,不然的話會(huì)導(dǎo)致模型訓(xùn)練出鬼圖。

訓(xùn)練前置準(zhǔn)備階段

????????可以看到我們的SD模型與秋葉大佬網(wǎng)盤默認(rèn)的模型不同,這是因?yàn)槟J(rèn)的模型訓(xùn)練會(huì)出鬼圖,需要下載這個(gè)“final-pruned.ckpt"模型。沒有的可以通過該鏈接下載。

鏈接:https://pan.baidu.com/s/170EwlO0IE140AFZQnwexRQ?pwd=m0bn?

提取碼:m0bn?

  • 訓(xùn)練設(shè)置

訓(xùn)練設(shè)置

????????1、刷新一下,刷新后才能在列表里看到創(chuàng)建的Embedding模型,選擇模型。

????????2、”嵌入式模型學(xué)習(xí)率“,建議默認(rèn)即可,太大效果不好但速度快,太小容易過擬合但速度慢,可以在前期調(diào)大一點(diǎn),后期小一點(diǎn)。

????????3、把圖片數(shù)據(jù)處理后的數(shù)據(jù)集目錄路徑復(fù)制進(jìn)去。

????????4、“提示詞模板”畫風(fēng)選擇style_filewords.txt;人物選擇subject_filewords.txt。

????????5、“最大步數(shù)”默認(rèn)10w,但是目前經(jīng)過測(cè)試5000以下的效果最好,建議不超過1w。

????????6、勾選保存模型的PNG圖片和從文生圖選項(xiàng)卡中讀取參數(shù)。

????????7、點(diǎn)擊”訓(xùn)練嵌入式模型“


6、訓(xùn)練過程

????????訓(xùn)練過程中可以通過觀察訓(xùn)練結(jié)果來及時(shí)調(diào)整“學(xué)習(xí)率”,如果錯(cuò)過某個(gè)階段的訓(xùn)練也可以在“sd-webui-aki\textual_inversion”中找到相應(yīng)日期下的模型文件夾查看每個(gè)階段的效果圖、模型還有各階段模型的loss值。


訓(xùn)練結(jié)果

表格值

????????需要注意的是,loss值越低不代表效果越好,以此表為例,我的500效果圖比7000好,具體哪個(gè)模型好還是需要看相應(yīng)的圖片效果。


7、模型轉(zhuǎn)移

????????最后,篩選結(jié)束以后,將你想要的階段模型轉(zhuǎn)移。從”sd-webui-aki\textual_inversion\“日期”\“模型名”\embeddings“中將模型復(fù)制到“sd-webui-aki\embeddings”。不需重啟啟動(dòng)器即可使用。


8、模型使用測(cè)試

????????打開“文生圖”,將你想測(cè)試的階段模型tag寫進(jìn)正向tag中或者點(diǎn)開模型列表,點(diǎn)擊想選的模型。然后生成即可進(jìn)行抽卡辣!

模型使用測(cè)試


9、個(gè)人感覺

????????測(cè)試了幾次之后感覺效果將就用,但是對(duì)于AI作畫網(wǎng)站上的那種模型來說精美程度還是差的很多。我的訓(xùn)練圖大部分是集中在臉上的,導(dǎo)致隨機(jī)抽卡許多下身的tag權(quán)重過低,雖然可以調(diào)高想要的tag權(quán)重,但是適配程度很低,出圖很怪,所以還是太吃訓(xùn)練圖了。

????????訓(xùn)練速度問題,本人3070速度為1-2it/s,一般是一個(gè)半小時(shí)左右一萬步,期間顯卡cuda滿載,所以一般只能聊聊天百度查查東西,看視頻都比較卡,大家可以參考一下。

[AI繪畫]Embedding/Textual inversion模型訓(xùn)練記錄的評(píng)論 (共 條)

分享到微博請(qǐng)遵守國(guó)家法律
石河子市| 屯门区| 上杭县| 溆浦县| 泉州市| 宁南县| 大洼县| 介休市| 库车县| 林甸县| 岱山县| 衡东县| 蓬安县| 东乡族自治县| 乐至县| 金塔县| 澳门| 乃东县| 福鼎市| 东方市| 噶尔县| 红桥区| 南部县| 共和县| 留坝县| 当雄县| 红河县| 夏河县| 吴忠市| 泸溪县| 尉氏县| 芦溪县| 梨树县| 博爱县| 东丰县| 闵行区| 寻甸| 富顺县| 淮滨县| 永泰县| 酒泉市|