暗黑檔案X嘻哈野史——關(guān)于So-VITS 項(xiàng)目的初步研究感悟(非技術(shù)向只是吐槽)

So-VITS 項(xiàng)目是關(guān)于AI變聲的項(xiàng)目:https://github.com/topics/so-vits-svc
Github 上目前有一個(gè)以"So-VITS-SVC 5.0"命名的項(xiàng)目。雖然叫這個(gè)名字,但這個(gè)項(xiàng)目是由愛好者自行維護(hù)的一個(gè)倉庫,并不是 So-VITS 的官方后續(xù)版本。本整合包將只更新由 So-VITS 社區(qū)官方維護(hù)的版本(即 So-VITS-SVC 4.1),如需嘗試 So-VITS 5.0,請自行前往該項(xiàng)目倉庫部署,勿與本整合包及 So-VITS 4.1 項(xiàng)目混淆。

未經(jīng)授權(quán)同意,禁止在音視頻網(wǎng)站發(fā)布的作品中標(biāo)注項(xiàng)目倉庫地址、倉庫作者、貢獻(xiàn)者、整合包作者的信息。
必須在作品中標(biāo)注免責(zé)聲明,免去倉庫作者、貢獻(xiàn)者、整合包作者對該作品一切后果的責(zé)任。
無論以任何形式二次發(fā)布基于該項(xiàng)目的軟件,都必須同時(shí)開放源代碼。

我今天嘗試用這款軟件去寫植物大戰(zhàn)僵尸花園戰(zhàn)爭的人物替換模型
但是當(dāng)我初步使用這個(gè)AI版本的時(shí)候發(fā)現(xiàn)TM的配置要求真高,虛擬內(nèi)存調(diào)到32G他媽的居然還不夠用

有時(shí)候群友這邊就會出現(xiàn)這種炸現(xiàn)存的BUG,明明顯卡有24GB的顯存

這位有錢的主,一塊系數(shù)的16t,最起碼1000塊錢,我都不知道該吐槽啥了。這尼瑪是服務(wù)器吧。


所以我在做之前我看了看自己的電腦配置,沃日還是算了,因?yàn)檠芯窟@個(gè) 實(shí)在是過于頭疼了。再加上4.1我第一次找筆記本做。

比如訓(xùn)練云寶(小馬寶莉動(dòng)畫的人物)的模型,看到這的時(shí)候我傻眼了。

推演半分鐘的瞬間多了4GB顯存,然后卡在21GB
21.4GB顯存了,玩什么大型游戲其實(shí)也是夠了,但是研究STV模型遠(yuǎn)遠(yuǎn)不夠

讓我無力的事情是,B站這塊的教學(xué)視頻寥寥無幾

所以如果做這類的視頻可能很有難度
如果有誰對植物大戰(zhàn)僵尸系列感興趣的可以一起研究
我混過FNF社區(qū)所以我能找到豌豆射手的音源,這一塊是沒問題的。關(guān)鍵在于外部遷移模型,數(shù)據(jù)處理,音源伴奏分離了。

純?nèi)寺?,無伴奏、底噪、和聲、混響等
WAV 格式,44100 hz,16 bit
整合包中預(yù)裝了 FFmpeg,因此即便不是 44100 hz, 16 bit 的 WAV 文件也可以上傳。如果在推理時(shí)遇到 FFmpeg 相關(guān)的錯(cuò)誤,請重啟 WebUI 后再次嘗試,或手動(dòng)使用音頻處理軟件轉(zhuǎn)換為正確的格式
建議你的內(nèi)存條64G再說吧,玩這個(gè)玩意兒感覺比玩AE離譜多了。