機器人反抗人類視頻爆火，背后還有AI神器加持！內(nèi)測已開
注意看，這個機器人對抗人類的視頻，在網(wǎng)上徹底火了。
那叫一個拳拳到肉，刺激程度引得圍觀群眾大呼鵝妹子嚶。
好消息是，這個機器人并非真實存在。
但另一個不知道是好還是壞的消息是，這樣的特效，是AI一鍵合成的。
就是說，從左邊這樣的人類實拍，到右邊這樣的特效畫面，人類需要做的，只是用鼠標把模型拖到畫面里。
這個AI神器，名叫Wonder Studio AI。
剛發(fā)宣傳片時，就曾引發(fā)wo cao聲一片。
現(xiàn)在內(nèi)測名額開始發(fā)放，網(wǎng)友們上手一玩，更是停不下來，直接在社交媒體上刷了屏。
比如隨手來一段比波士頓動力還動感流暢的男團熱舞。
或者在自個兒屋里來段freestyle。
↑↑↑這個作品的作者還透露，這是一個原本需要三天完成的視覺特效鏡頭，現(xiàn)在只需要1分鐘。
也難怪網(wǎng)友們坐不住了。
有關(guān)Wonder Studio，官方的說法是，“一種可自動為CG角色制作動畫、打光，并將其合成到真實場景中的AI工具”。
按照官網(wǎng)說明，對于用戶來說，在CG動畫制作階段，你不再需要復(fù)雜的3D軟件，也不需要昂貴的動捕硬件。
只需一臺用來拍攝的相機，拍好視頻后丟進Wonder Studio處理，就足以以假亂真。
具體步驟是這樣的：
首先用相機拍攝一段視頻，視頻中，真人演員可以隨意做出任何動作；
將MP4或MOV等格式的視頻導(dǎo)入Wonder Studio，并選定需要處理的視頻段落，拖入中間區(qū)域等待處理；
點擊菜單欄的next按鈕，AI開始識別和分析視頻中的人物；
選中右側(cè)選項欄中所需要的CG模型，拖拽至需要替換的人物區(qū)域；
這時候會跳出一個小框，能夠根據(jù)需要調(diào)整HDR打光、畫質(zhì)清晰度、視頻格式等。
最后，選擇解算生成，就能完成視頻段落中CG模型對真人演員的替換。
對于專業(yè)人士來說，除了最終成品，Wonder Studio還能導(dǎo)出新視頻的不同軌道，包括動作捕捉、攝像機跟蹤和空鏡等等。
面對需要修改的細節(jié)，也可以直接上手微調(diào)。
傳統(tǒng)的CG制作流程，需要移除原有人物、把需要替換的CG元素導(dǎo)入引擎或Blender等軟件當中、根據(jù)相機解算結(jié)果進行合成、匹配燈光、渲染……最終把新的CG模型放到視頻場景中。
比較而言，用上Wonder Studio后簡化了很多工序，也難怪很多人評論，如果這個工作流跑通，是十分利好小成本影視制作的。
不過，Wonder Studio并非十全十美。
主要體現(xiàn)在CG模型覆蓋原人物后，CG角色和背景銜接處處理不算優(yōu)秀。
比如會出現(xiàn)美顏瘦臉特效開太大，以至于臉部周圍背景扭曲的情況：
而且，CG模型的邊緣像素會被拉伸，原人物的衣物等不能做到100%消除和被覆蓋：
開頭展示的爆火視頻中，其實也有不少穿幫鏡頭。
所以，雖然效果強大操作簡單，目前而言，Wonder Studio還是不能單獨放到實際項目中使用，否則一眼驚艷，再看露餡。
但其展示的潛能，已經(jīng)得到內(nèi)測網(wǎng)友的蓋章肯定。
有內(nèi)測網(wǎng)友反饋，在他的幾次測試中，Wonder Studio能夠自動化80%的視覺特效工作。
它仍存在一些困難的領(lǐng)域，但它提供的價值主張是，只需要付出很少的努力就能做出相當不錯的東西。
而且這只是開始！它還會變得更好！
有意思的不止是產(chǎn)品，Wonder Studio背后的公司，也頗有故事。
它的出品方是一家名叫Wonder Dynamics的AI初創(chuàng)公司，致力于通過AI提高電影制作的效率和質(zhì)量。
截至目前，公司在種子輪和A輪一共募集了1150萬美元融資。
Wonder Studio是他們籌備3年后，推出的一款基于AI的在線視頻特效處理平臺。
公司已經(jīng)表示，Wonder Studio后續(xù)還將繼續(xù)簡化動作捕捉和渲染環(huán)節(jié)，繼續(xù)提高制作效率。而且在公司的設(shè)想中，創(chuàng)作者在將來還能在系統(tǒng)自由上傳自己的3D模型。
再來看公司創(chuàng)始團隊，不少人是熟面孔。
比如世界聞名的導(dǎo)演斯皮爾伯格，就是這家公司的顧問。
而公司創(chuàng)始人之一，是《頭號玩家》男主演泰爾·謝里丹。
（不知道是說男主“干一行愛一行”好呢，還是說他“積極致力于用AI搶自己飯碗”好，）
還有消息稱，美國導(dǎo)演組合羅素兄弟正在拍攝的一部電影中，Wonder Studio已經(jīng)參與了部分制作環(huán)節(jié)。電影主角是《怪奇物語》主演Millie Bobby Brown和《銀河護衛(wèi)隊》中星爵的扮演者Chris Pratt，電影將上線Netflix。
期待電影之前，更值得關(guān)注的一點是，最近這段時間，AI力量對視覺領(lǐng)域瘋狂下手了。
這就不得不提到近日在科技圈瘋狂刷屏的Meta大殺器，Segment Anything Model （SAM）。
該模型驚艷世人的能力，就是能夠識別和分離圖像及視頻中的特定對象。使用SAM，用戶可以通過單擊或輸入文字，來選中需要編輯的任何物體。
Meta在介紹SAM時寫道：
SAM 已經(jīng)學(xué)會了關(guān)于物體的一般概念，并且，它還可以為任何圖像，或視頻中的任何物體生成msak，包括訓(xùn)練集中不包含的類型。
SAM足夠通用，且在新的圖像領(lǐng)域無需額外訓(xùn)練，達到即開即用。
這種零樣本遷移的能力，正是GPT-4能力驚人的重要原因之一。因此，國內(nèi)外不少媒體稱SAM的發(fā)布為CV領(lǐng)域的ChatGPT時刻。
目前，SAM已經(jīng)開源，并進一步提供了其10億掩碼數(shù)據(jù)集的完整細節(jié)，
Meta官方的說法是，隨著技術(shù)發(fā)展，SAM可以成為AR、VR等更通用系統(tǒng)的強大組件。
聯(lián)想到今天介紹的Wonder Studio，接入SAM能力后，對原有人類圖像的分割，是不是就不再會出現(xiàn)裙角被遺漏的情況了？
