Embeddings | LoRa | Hypernetwork概念簡析,懂了才
2023-08-30 12:52 作者:天理不歪玩到關(guān)服 | 我要投稿

# 定向丹方
其實就是將一系列提示詞整合到一個提示詞之中,相當(dāng)于提示詞詞典中的一堆書簽
關(guān)于畫風(fēng):
對于一個大模型,其實訓(xùn)練集內(nèi)部就已經(jīng)包含了很多不同畫風(fēng)的原始圖片。使用Lora或者Embeddings的作用便是通過外加資料使畫風(fēng)得以顯現(xiàn)。
所以,如果只是想更換不同的畫風(fēng),并不需要每次都掛載不同的模型進(jìn)行大換血,Lora和權(quán)重的微調(diào)才是更為穩(wěn)妥的方式
選用幾個泛用性和最受好評的大模型打底,在此基礎(chǔ)之上使用合適的lora和提示詞,并多次調(diào)試,才是最具有性價比的煉丹方法
---
使用方法:
- 將下載好的丹方裝入SD根目錄文件夾中
- 點(diǎn)擊生成按鈕下方的紫色卡牌自選
(可以將對應(yīng)Lora跑出來的圖設(shè)置為其縮略圖)
---
## Embeddings(詞嵌入模型)
打包提示詞
文件處理:后綴通常和VAE一致,為pt,放入embeddings文件夾中
原理:嵌入式向量,采用定向標(biāo)簽的方式來鎖定特定形象的,直接在咒語中加入
案例:
- cornen_dva(用于生成DVA)
- CharTurnerV2(用于生成角色三視圖)
- EasyNegative(防止產(chǎn)生錯誤結(jié)構(gòu))
## LoRA(低秩適應(yīng)模型)
內(nèi)置案例圖+打包提示詞(通常用于特定人物)
下載對應(yīng)Lora后,將其放入對應(yīng)的文件夾之中,并使用
<Lora:你所命名的Lora文件名:所需要的權(quán)重>
,即可裝載對應(yīng)的Lora
通常文件大小為Mb級別,使用時最好使用訓(xùn)練LoRa時使用的對應(yīng)模型
相當(dāng)于封裝好了的圖片克隆體
誰能想到呢,弄到最后,使用自己寫的文生圖咒語已經(jīng)是很原始的作畫方法了,這幫搞計算機(jī)的果然啥都想做成封裝
標(biāo)簽: