虛擬歌姬調(diào)教小技巧:MIDI 與 Pitch 對照

成品展示:

站內(nèi)已有多位UP主提到過這個技巧,比如:

為了方便沒有相關(guān)軟件、插件的用戶,在這里提供一個開源方案。如果您可以訪問基于云端的開發(fā)環(huán)境,整個流程可以在云端進行。由于專欄修改次數(shù)的限制,詳細使用方式請前往 github/gitee 參考最新代碼。如有疑問可評論或私信,不保證解答。
本文中文字內(nèi)容均按照?CC BY-SA 4.0 進行許可
人聲分離
推薦兩個開源方案,在 Github repo 內(nèi)均有完整的用戶指南,均可以通過 本地安裝 或 Docker 鏡像 或 云端環(huán)境 運行。
Spleeter
Music Demixing Challenge 的 baseline,所需算力較小,效果稍差
Demucs
其內(nèi)置的?mdx 模型 在 2021?Music Demixing Challenge 榜 A 冠軍 榜 B 亞軍,所需算力稍大,效果較好。
輸出對比視頻
下一步,請按照?https://github.com/zsliu98/midi-pitch 或 https://gitee.com/zsliu98/midi-pitch (gitee 將盡量與 github 同步)中 README.md 的要求,安裝所需的項目。
運行代碼后將在輸出目錄產(chǎn)生三個文件,其中 pitch.mp4 即是成品視頻。