用Stable Diffusion 制作AI 動(dòng)畫的基本流程和我的感悟
本文不是什么喂飯教程,只是理清思路。
制作或者下載? ?一個(gè) 真人視頻 或 MMD視頻;
把視頻輸出幀,輸出圖片
用SD轉(zhuǎn)繪圖片。
利用 SD結(jié)果圖 +?補(bǔ)幀 合成視頻。
用dflick插件去閃爍,一次不行就多來(lái)幾次。有?達(dá)芬奇 、PR版本,AE版本好像有。
用topaz?放大至高清。
訣竅:
最好只轉(zhuǎn)繪關(guān)鍵幀,用 EBS法抽關(guān)鍵幀 或者?直接2抽1。
SD的大模型和Lora盡量和原視頻貼近。
SD如果加Controlnet,建議linart和tile_colorfix必開(kāi),動(dòng)作復(fù)雜加上depth,數(shù)值建議為0.3-0.6。
合成視頻的補(bǔ)幀,可以用 EBS或topaz,取決于你抽取關(guān)鍵幀的方式。
參考:
1.我理解中最早的AI動(dòng)畫:https://www.bilibili.com/video/BV1M54y137Bd
2.這個(gè)最早的教程:https://www.bilibili.com/video/BV1984y1N7Di
3.我參考的的教程:
????以太之塵丨:
????????????????https://www.bilibili.com/video/BV1kW4y1978P/?
????????????????https://www.bilibili.com/video/BV1hu411s7ho
????賽博智造梧桐:
????????????????https://www.bilibili.com/video/BV1Ha4y1w7PQ/
????????????????https://www.bilibili.com/video/BV1Yz4y1n7vV/
我的感悟:
技術(shù)已經(jīng)不是動(dòng)畫的關(guān)鍵了,創(chuàng)意和意志力才是。
Stable Diffusion只是AI的一個(gè)小領(lǐng)域的小工具,經(jīng)過(guò)無(wú)數(shù)人的探索后,達(dá)到了低成本轉(zhuǎn)繪的級(jí)別;其他的AI工具,我相信
動(dòng)畫領(lǐng)域,未來(lái)會(huì)迎來(lái)大AI時(shí)代。
以往的時(shí)代,個(gè)人做動(dòng)畫,簡(jiǎn)直是天方夜譚。
《一拳超人》的ONE,創(chuàng)意無(wú)限,但是原稿稀爛,靠好心的專業(yè)人士 村田雄介 的支持弄起來(lái)了專業(yè)級(jí)漫畫和專業(yè)級(jí)動(dòng)畫;
做《霧山五行》的林魂,以前做了幾年的動(dòng)畫,版權(quán)被資本占了,不得已去開(kāi)發(fā)《霧山五行》,在家人的支持下,搞了三年多,才出《霧山五行》第一季。
這兩者,都有極高的創(chuàng)造力,卻吃了太多的苦頭;
如果是AI時(shí)代,這些人制作動(dòng)畫的成本將大大降低,優(yōu)質(zhì)的動(dòng)畫會(huì)越來(lái)越多;
很多人說(shuō)未來(lái)會(huì)有一大堆垃圾動(dòng)畫,不可否認(rèn),這是必然的。但是難道今天沒(méi)有垃圾嗎?未來(lái)的垃圾動(dòng)畫借助AI的力量,變得比今天的垃圾動(dòng)畫更好,不也是一種進(jìn)步嗎?