聊齋是如何煉成的 | 實驗編程AI藝術(shù)訓(xùn)練營3期第15課SDXL模型訓(xùn)練
實驗編程AI藝術(shù)訓(xùn)練營3期第15課:
AI聊齋訓(xùn)練過程,附訓(xùn)練參數(shù)配置文件。
Stable Diffusion XL LoRA風(fēng)格模型訓(xùn)練。
要點提示
數(shù)據(jù)集的處理及標(biāo)注很重要(單獨開一篇,可先參考文末附的教程)。
文末附上了幾個不錯的教程,推薦反復(fù)參考。
訓(xùn)練本身沒有一次性完美解決方案,網(wǎng)上教程充滿個人經(jīng)驗與玄學(xué),需要多嘗試。
訓(xùn)練的參數(shù)設(shè)置與訓(xùn)練目標(biāo)息息相關(guān),每人不一樣,配合答疑來完成。
訓(xùn)練類型
最重要三類:
Dreambooth(訓(xùn)練得到大模型,對應(yīng)C站上的checkpoints);
LoRA;
Textural Inversion(現(xiàn)在訓(xùn)練需求不多,主要場景是直接使用C站上訓(xùn)練好的Textural Inversion負關(guān)鍵詞)。
時間緊可忽略的訓(xùn)練類型: Hypernetwork,基本過時,LoRA替代;
kohya_ss訓(xùn)練工具里的“Fine Tune”,跟Dreambooth Caption方式差不多,可Dreambooth平替。
本節(jié)講如何在kohya_ss里訓(xùn)練SD XL、SD1.5版 LoRA?風(fēng)格模型。 角色的訓(xùn)練網(wǎng)上有大量教程,角色訓(xùn)練比風(fēng)格訓(xùn)練相對容易拿捏。
詳細完整步驟見訓(xùn)練營課程。
本課訓(xùn)練參數(shù)配置文件一覽
從小鵝通本節(jié)課程附件中下載。 AI聊齋SD1.5版 Liaozhai_sd1.5_v1.3.json
AI聊齋SDXL版?Liaozhai_xl_v1.0.json
其他第三方配置文件
推薦參考教程
訓(xùn)練工具官方文檔
https://github.com/kohya-ss/sd-scripts/blob/main/docs/train_README-zh.md 訓(xùn)練工具官方推薦教程(含數(shù)據(jù)集處理)
https://github.com/bmaltais/kohya_ss#tutorials THE?OTHER?LoRA?TRAINING?RENTRY
https://rentry.org/59xed3 LoRA?guide
https://rentry.org/2chAI_LoRA_Dreambooth_guide_english Stable?Diffusion?LoRA?訓(xùn)練不完全指北(1)
https://www.bilibili.com/read/cv23072377/ Stable?Diffusion?Lora?locon?loha訓(xùn)練參數(shù)設(shè)置
https://zhuanlan.zhihu.com/p/618758020 ULTIMATE?SDXL?LORA?Training!
https://www.youtube.com/watch?v=N_zhQSx2Q3c&list=PLkIRB85csS_vK9iGRXNHG618HTQKhDrZX&index=16 推薦★?SDXL?LORA?STYLE?Training!
https://www.youtube.com/watch?v=1BCYdd9r1To&list=PLkIRB85csS_vK9iGRXNHG618HTQKhDrZX&index=17 常用正則化圖像下載
https://huggingface.co/datasets/ProGamerGov/StableDiffusion-v1-5-Regularization-Images
更多效果案例:
AI聊齋 | 陸判
AI聊齋 | 白蓮教
AI聊齋話題
訓(xùn)練營3期已開課程:
1.1 課程體系介紹
1.2 生成式AI藝術(shù)創(chuàng)作過程
1.3 Colab版SD webui
2 SD webui本地安裝
3 SD常用操作和學(xué)習(xí)路徑梳理
4 SD webui常用操作(2),CLIP/VAE/修復(fù)與放大等
5 ControlNet基礎(chǔ)
6?Multi ControlNet
7?ControlNet文字效果(Canny)
8 ControlNet文字效果(光影)
9?影像工作流分析-1
10?Deforum與Text to Video影像制作基礎(chǔ)
11?SD EbSynth影像生成
12?SD EbSynth 進階,視頻遮罩的應(yīng)用
13 通過RobustVideoMatting摳除視頻背景并生成遮罩
14 SD模型訓(xùn)練(1)
15 SD模型訓(xùn)練(2)
后續(xù):
AI交互,音畫聯(lián)動等
更多模型訓(xùn)練主題
其他綜合應(yīng)用
中間穿插講解在
學(xué)習(xí)需求征集帖子
中的內(nèi)容。
訓(xùn)練營、課程體系、會員詳細介紹??
實驗編程AI藝術(shù)訓(xùn)練營2023報名及教學(xué)資源一覽
AI藝術(shù)訓(xùn)練營3期介紹(視頻)
StableDiffusion XL 模型訓(xùn)練(1) | AI訓(xùn)練營3期第14課
訓(xùn)練營3期 13 如何摳除視頻背景并生成遮罩
訓(xùn)練營3期 12 影像進階 SD EbSynth + 視頻遮罩
訓(xùn)練營3期 11 SD EbSynth影像生成方法
訓(xùn)練營3期 10 Deforum與Text to Video影像制作基礎(chǔ)
訓(xùn)練營3期 09?AI影像工作流分析-1
訓(xùn)練營3期 08 AI文字光影效果
訓(xùn)練營3期 07?AI文字懟一切
訓(xùn)練營3期 06 多重ControlNet
訓(xùn)練營3期 05 ControlNet基礎(chǔ)
訓(xùn)練營3期 04?SD常用操作(2)
訓(xùn)練營3期 03
訓(xùn)練營3期 02
訓(xùn)練營3期 01
Stable Diffusion webui 本地安裝教程 Windows(2023.6)
Stable Diffusion 性能優(yōu)化 - xformers安裝問題
Stable Diffusion上手路徑與常用操作
Stable Diffusion視頻生成時風(fēng)格化與一致性的取舍
ControlNet各功能參數(shù)效果一覽(一)
ControlNet各功能參數(shù)效果一覽(二)
訓(xùn)練營3期在情報中心圈子內(nèi),課程持續(xù)添加中:
試聽課、公開課見文末二維碼。
加入情報中心圈子、或1v1超級會員,隨到隨學(xué)。
情報中心:
情報中心類似XX星球。匯總了課程、課件、源代碼、資源、交流答疑。 有效期內(nèi)無限暢享訓(xùn)練營、大帥課在內(nèi)的多套課程,詳見
?
教學(xué)資源一覽
。
1v1超級會員:
導(dǎo)師制1對1長期輔導(dǎo),日常答疑,視頻會議。
含情報中心完整權(quán)益
,另加 AI Craft 聯(lián)合課程系列。 面向群體、熱門輔導(dǎo)主題等,詳見
?
教學(xué)資源一覽
。
部分課程
為DragGAN熱身,實時AI音畫交互案例
AI Craft 第1課報名 | AI單刷愛死機
課件已開放,今晚(周四)AI動畫視頻制作 | 大帥課第13期
課程動態(tài)|AI流體動畫2-山水與正弦
課程動態(tài)|放肆篇-AI動畫-流體效果1
課程動態(tài)|AI藝術(shù)入門篇Runway章課件更新
關(guān)于實驗編程
關(guān)于實驗編程 - 2023.2
部分教學(xué)資源索引:
yuque.com/code2art
試聽課、公開課、課程咨詢及微群加V:
floatbug
群將滿,加V煩請注明: 來源(公B抖小知)、學(xué)校單位、專業(yè)行業(yè)、作品集/tw/ins等,高效交流。 您的鼓勵,在看,點贊,收藏,轉(zhuǎn)發(fā),是我亂碼的動力。
英文版全網(wǎng)ID:@avantcontra
公知小抖B:
實驗編程