最近有許多小伙伴詢問，出一個專欄分享一下我制作AI動畫的經(jīng)驗。

這并不一個完整的教程，主要是面對目前已經(jīng)能夠制作AI動畫的同學，如果你對文章中的一些概念不理解，你可以先觀看這位UP的一系列視頻：大江戶戰(zhàn)士

廢話不多說，直接上參數(shù)：

你就是我的天使?參數(shù)：

solo,1girl,symbol-shaped pupils,cross-shaped pupils,naxida64,<lora:nahidaGenshinImpact_1:0.8>
Negative prompt: (worst quality, low quality:1.4), (realistic, lip, nose, lipstick, eyeshadow:1.0), (greyscale, monochrome:1.0), text, title, logo, signature,easyNegative
Steps: 40, Sampler: DPM++ SDE Karras, CFG scale: 9, Seed: 3362304569, Size: 768x1536, Model hash: e4b17ce185, Denoising strength: 0.35, Clip skip: 2, ENSD: 31337, ControlNet-0 Enabled: True, ControlNet-0 Module: hed, ControlNet-0 Model: control_hed-fp16 [13fee50b], ControlNet-0 Weight: 0.5, ControlNet-0 Guidance Start: 0, ControlNet-0 Guidance End: 1, ControlNet-1 Enabled: True, ControlNet-1 Module: pidinet, ControlNet-1 Model: control_scribble-fp16 [c508311e], ControlNet-1 Weight: 1, ControlNet-1 Guidance Start: 0, ControlNet-1 Guidance End: 1, Eta: 0.68

視頻幀率30，后通過軟件補到60。

如果你沒有ControlNet-pidinet，請把webUI更新到github最新版

愛你~?參數(shù)：

solo,1girl,symbol-shaped pupils,cross-shaped pupils,naxida64,<lora:nahidaGenshinImpact_1:0.8>
Negative prompt: (worst quality, low quality:1.4), (realistic, lip, nose, lipstick, eyeshadow:1.0), (greyscale, monochrome:1.0), text, title, logo, signature,easyNegative
Steps: 30, Sampler: DPM++ SDE Karras, CFG scale: 9, Seed: 3362304569, Size: 768x1024, Model hash: 5493a0ec49, Denoising strength: 0.35, Clip skip: 2, ENSD: 31337, ControlNet-0 Enabled: True, ControlNet-0 Module: hed, ControlNet-0 Model: control_hed-fp16 [13fee50b], ControlNet-0 Weight: 0.6, ControlNet-0 Guidance Start: 0, ControlNet-0 Guidance End: 1, ControlNet-1 Enabled: True, ControlNet-1 Module: normal_map, ControlNet-1 Model: control_scribble-fp16 [c508311e], ControlNet-1 Weight: 0.6, ControlNet-1 Guidance Start: 0, ControlNet-1 Guidance End: 1, Eta: 0.68

視頻幀率15，后通過軟件補到30

主要就是LoRA，controlnet，還有?easyNegative 的embeddings，并沒有什么黑科技。

使用參數(shù)的方法：

復制到prompt，然后點generate下面的那個箭頭。

controlnet需要手動輸入，參考我上面的數(shù)據(jù)。ControlNet-pidinet使用control_scribble 模型。由于是剛出的，我沒找到它對應的模型。

對于MMD模型的調(diào)整，使用PmxEditor 來編輯PMX模型：

1. 刪除小草神的臂甲，我感覺這個臂甲會影響AI對于胳膊的判斷，經(jīng)常畫出怪異的胳膊。缺點是刪了之后，AI有時候會嘗試還原臂甲，在視頻里面經(jīng)?？吹礁觳灿斜郗h(huán)出現(xiàn)消失。

? ? 2.? 修改手臂和頭發(fā)的物理碰撞。很多人發(fā)現(xiàn)視頻里面頭發(fā)穿模了，這是故意的。這是為了避免手臂打到頭發(fā)，導致頭發(fā)亂飛，影響畫面穩(wěn)定。

對于鏡頭的調(diào)整：

? ? ? 為了讓人物保持在畫面中心，需要制作鏡頭動作。這是為了提高人物在畫面中的占比，可以提高AI出圖的質(zhì)量。

? ? ? 如果你不熟悉K鏡頭，你可以使用MMD的相機的骨骼追蹤：

? ? ? 不過這個鏡頭追蹤其實看起來特別怪，可以測試的時候用。最終出視頻應該是用不了，還是自己努努力K一個鏡頭吧。

MMD的一些配置：

1.????取消本影和地面陰影，避免對AI造成影響，讓AI給你上光影。

2. 修改動作。 有一些動作穿模了，還有些動作，人物面部被大面積遮住。都會影響AI出圖質(zhì)量。雖然可以通過降低重繪幅度解決，但最好還是調(diào)整原圖。

在img2img過程中的一些經(jīng)驗：

1. 在人物側(cè)身，背面，或者臉部被大面積遮住的情況下，AI出圖質(zhì)量很差，通過降低重繪幅度來避免。 我一般都會提前吧這些幀單獨拉出來，調(diào)整參數(shù)處理。

2. 篩選出所有人物閉眼的圖片，在img2img這些圖片的過程中。prompt中的symbol-shaped pupils,cross-shaped pupils 替換為closed eyes。在人物閉眼的時候，提示詞和實際畫面有沖突，會導致AI出圖質(zhì)量變差。

總結(jié)：

大致就是上面這些內(nèi)容了，并沒有什么黑科技。都是通過不斷的調(diào)整以及各種細節(jié)的累積，提高畫面穩(wěn)定性。?

通過人物的LoRA和controlNet，基本可以控制人物服飾，飾品的穩(wěn)定性。只有光影的變化會導致閃爍。這個可以通過降低幀率，降低重繪幅度，使用多幀渲染法來解決。

我嘗試過使用0.5的重繪幅度，閃爍就很嚴重了。其實0.35也有點閃，不過我上傳B站，B站給我二壓之后閃爍現(xiàn)象減輕了很多，非常神奇。

我嘗試過多幀渲染法，但最終沒有使用。是由于它要耗費3倍算力。我的《你就是我的天使》，視頻長度85秒，2600幀，4090 跑了20多個小時。如果上多幀渲染估計會超過80小時。后面我可能會嘗試用高重繪幅度+多幀渲染，大江戶戰(zhàn)士好像就是這個組合。效果非常不錯。