作者/小ji

這些天，F(xiàn)acebook公司改名Meta的新聞，讓 “元宇宙”又一次引發(fā)大眾熱議。?

元宇宙描述了一個(gè)既映射于、又獨(dú)立于現(xiàn)實(shí)世界的虛擬世界，所有人都可以以虛擬分身的方式進(jìn)入其中，獲得身臨其境的感官體驗(yàn)。?

雖然有關(guān)這一概念的一切還在爭(zhēng)論中，但我們已經(jīng)感受到了虛擬與現(xiàn)實(shí)交融地帶的一步步擴(kuò)張：沖入主流視野的虛擬主播們、爆款VR游戲、英偉達(dá)發(fā)布會(huì)中真假難辨的數(shù)字人等。?

實(shí)際上，這些點(diǎn)滴動(dòng)向，其背后都是大量科技研發(fā)團(tuán)隊(duì)們動(dòng)輒數(shù)年的研發(fā)成果。

同在今年，在3D工業(yè)軟件領(lǐng)域也出現(xiàn)了振·奮·人·心·的研發(fā)成果——一款3D面部全流程制作軟件在今年5月份上市了。?一時(shí)間在全球3D行業(yè)引起關(guān)注，它不僅可以幫助3D創(chuàng)作者們快速完成表情建模及表情動(dòng)畫制作，還提供了功能強(qiáng)大的面部動(dòng)畫的肌肉擬真功能，其高效和智能，讓全球的3D創(chuàng)作者都感到驚艷。

更讓人驚喜的是，這個(gè)具有劃時(shí)代意義的軟件，竟然出自國(guó)人團(tuán)隊(duì)之手——這就是由國(guó)內(nèi)極客團(tuán)隊(duì)FACEGOOD耗時(shí)5年研發(fā)，歷經(jīng)大量項(xiàng)目沉淀、優(yōu)化，以及技術(shù)研發(fā)后，向全球推出的AVATARY軟件。?

而同年7月2日，知名游戲公司Take-Two宣布全資收購(gòu)法國(guó)面部動(dòng)畫技術(shù)解決方案公司 Dynamixyz ，這一消息發(fā)布后掀起了行業(yè)內(nèi)的躁動(dòng)，對(duì)于很多動(dòng)畫、游戲開發(fā)等應(yīng)用場(chǎng)景和各類集成廠商來說無疑是措手不及。?

趕上對(duì)手的退市，又趕上了元宇宙的浪潮，與其說AVATARY是應(yīng)運(yùn)而生的，小趴覺得不如說這個(gè)“五年磨一劍”的團(tuán)隊(duì)，必定是有備而來，他們的野心并非“替代”，而是“超越”。

國(guó)產(chǎn)團(tuán)隊(duì)耗時(shí)5年打造AVATARY?

實(shí)際上，我們?cè)缭?018年就報(bào)道過關(guān)于FACEGOOD這一國(guó)內(nèi)團(tuán)隊(duì)，以及他們?cè)诒砬椴蹲郊夹g(shù)研發(fā)上突破。?

當(dāng)時(shí)的FACEGOOD自主研發(fā)的表情捕捉技術(shù)，讓表情動(dòng)畫的制作效率大大提高，人力投入也大大減少，對(duì)比傳統(tǒng)手工K幀的方式，可以實(shí)現(xiàn)近90%的效率提升。?

這一技術(shù)的突破，可謂打破了國(guó)內(nèi)長(zhǎng)久的面部表情捕捉技術(shù)領(lǐng)域的空白。對(duì)比國(guó)外同類型軟件使用效果，F(xiàn)ACEGOOD在不少方面甚至更勝一籌。

然而這一突破只是FACEGOOD團(tuán)隊(duì)的階段性成果，他們的最終目標(biāo)，是想要為所有3D創(chuàng)作者們提供一個(gè)數(shù)字形象的一體化的、統(tǒng)一的一站式工業(yè)軟件平臺(tái)，在產(chǎn)業(yè)鏈的上游，在應(yīng)用的最底層，為廣大用戶賦能。?

在經(jīng)過又3年的項(xiàng)目積累、算法研發(fā)和優(yōu)化沉淀后， FACEGOOD團(tuán)隊(duì)終于實(shí)現(xiàn)了這一目標(biāo)的第一步。

這就是軟件AVATARY。?AVATARY集成表情建模、肌肉綁定，面部捕捉及驅(qū)動(dòng)三大功能為一體，可以針對(duì)動(dòng)畫、電影、游戲、AR\VR中的虛擬數(shù)字形象的面部表情動(dòng)畫提供更加高效的，效果更優(yōu)的制作工具。

此外，AVATARY的高精度面部捕捉技術(shù)跟蹤參數(shù)達(dá)到了十萬3D點(diǎn)云，這意味著3D創(chuàng)作者們可以利用AVATARY捕捉到真人的細(xì)微表情，實(shí)現(xiàn)如真人般細(xì)膩?zhàn)匀坏?D表情效果。

這樣總結(jié)，畢竟一款面向?qū)I(yè)從業(yè)者的3D工業(yè)軟件，可能對(duì)初次接觸這款軟件的人來說，有些吃不透。?

接下來，我們挨個(gè)說下AVATARY的各個(gè)強(qiáng)大功能。?

首先，是AVATARY的面部捕捉功能。?

AVATARY的面部捕捉支持兩種流程：離線流程(Tracker/Retargeter)和實(shí)時(shí)驅(qū)動(dòng)流程(LiveDrive)。?

離線流程操作便捷，分三步：先進(jìn)行真人面部視頻采集；接著把采集到的面部表情視頻進(jìn)行跟蹤解析；最后將解析數(shù)據(jù)同步給模型，再驅(qū)動(dòng)模型就能完成動(dòng)畫制作了。

對(duì)比傳統(tǒng)3D表情動(dòng)畫制作，如果完全依賴手工建模、對(duì)齊、綁定，完成一段5分鐘的動(dòng)畫可能需要?jiǎng)赢嫀焸兘?0天的工作量，而使用AVATARY則可以將這一過程縮短至幾分鐘！?

此外，動(dòng)畫師們可以使用任意USB攝像頭，就可以快速高效地進(jìn)行真人表情采集了。并且，AVATARY的跟蹤參數(shù)高達(dá)十萬3D點(diǎn)云， 動(dòng)畫師們可以采集到以前根本不敢想象的復(fù)雜表情數(shù)據(jù)。AVATARY的目標(biāo)是賦能3D創(chuàng)作者，解放創(chuàng)作者雙手，讓創(chuàng)作者把寶貴的時(shí)間放在藝術(shù)創(chuàng)作本身，基礎(chǔ)性的重復(fù)工作交給軟件自動(dòng)處理。?

實(shí)時(shí)驅(qū)動(dòng)是AVATARY面捕功能中的另一個(gè)亮點(diǎn)。?這一功能將極大地方便虛擬直播用戶們，以及其他對(duì)實(shí)時(shí)面捕有需求的創(chuàng)作者們。

案例：PUBG電競(jìng)直播使用了FACEGOOD D2進(jìn)行實(shí)時(shí)表情捕捉

與之相應(yīng)，在硬件上， FACEGOOD團(tuán)隊(duì)也自主研發(fā)了高品質(zhì)的頭戴硬件專業(yè)設(shè)備，可以選擇配套使用。

配套硬件設(shè)備采用了紅外攝像的方式，可以避免可見光的干擾，減少抖動(dòng)；采用雙攝像頭設(shè)計(jì)，可以進(jìn)行比更高精度的采集，更加精準(zhǔn)地將表情還原。?

目前FACEGOOD團(tuán)隊(duì)針對(duì)性的推出了4款硬件，無論是3D獨(dú)立創(chuàng)作者、高校教學(xué)，到中、大型游戲、乃至高精度虛擬偶像IP孵化公司，無論是從事3D動(dòng)畫制作生產(chǎn)、虛擬直播/綜藝、影視特效以及高精度數(shù)字人動(dòng)畫生產(chǎn)制作等等，都可以根據(jù)需要進(jìn)行了解和配備。?

同時(shí)，F(xiàn)ACEGOOD團(tuán)隊(duì)表示，AVATARY對(duì)硬件沒有特殊要求，普通用戶依然可以使用任意常見攝像頭進(jìn)行高精度表情捕捉和制作。??

另外兩項(xiàng)強(qiáng)大功能?

除了高精度面部捕捉功能，AVATARY另外兩項(xiàng)功能也讓小趴驚嘆。?

首先是AVATARY自動(dòng)表情建模(BlendShape) 功能—— AutoFace。?大家應(yīng)該對(duì)傳統(tǒng)3D角色面部表情高精度建模成本有所耳聞，如果純靠人工制作一個(gè)形象通常需要很久，耗時(shí)一個(gè)月甚至兩三個(gè)月也是有的，人力消耗很大。?

而依靠AutoFace提供的自動(dòng)生成功能，只需要幾分鐘，即可生成高精度BlendShape。?

并且，此功能目前支持的形象類型非常豐富，涵蓋人型、類人、動(dòng)物、怪獸等，讓動(dòng)畫師可以完全控制美術(shù)效果，大大提升工作效率。?

AutoFace使用也十分簡(jiǎn)單，創(chuàng)作者只需導(dǎo)入一個(gè)基礎(chǔ)模型，按照模版進(jìn)行標(biāo)點(diǎn)，即可自動(dòng)生成51個(gè)表情模型（BlendShapes）。?

目前，F(xiàn)ACEGOOD團(tuán)隊(duì)表示，該功能還在不斷優(yōu)化升級(jí)中。未來，在精度、BlendShapes的數(shù)量和模型的兼容支持上，都會(huì)越來越完善，最終實(shí)現(xiàn)自動(dòng)化綁定。?

AVATARY的最后一個(gè)逆天功能，就是肌肉仿真——MuscleDrive。?

3D動(dòng)畫師們應(yīng)該體會(huì)過這種無力感：在傳統(tǒng)的3D人物表情制作流程中，依靠BlendShape實(shí)現(xiàn)的表情驅(qū)動(dòng)，面對(duì)微表情可以說是捉襟見肘。?而人的微表情變化是無窮的，表演的靈魂也恰恰都在這些微表情中。?

為了解決這一問題， FACEGOOD團(tuán)隊(duì)的研發(fā)人員使用算法得出精確的3D人臉之后，通過肌肉仿真算法引擎，將表情參數(shù)重定向到虛擬人物，“每一幀的表情都是根據(jù)肌肉計(jì)算出來的”。?

FACEGOOD的仿真引擎可以模擬真實(shí)的軟體變形、撕裂等物理運(yùn)動(dòng)，從底層力學(xué)出發(fā)，徹底解決高精度數(shù)字人表情仿真難題。

這意味著，使用AVATARY，不僅可以實(shí)現(xiàn)更高精度跟蹤人臉的3D特征，包括臉型、五官深度、微表情的變化等，更可以讓動(dòng)畫師從“被綁定卡脖子的日子”中解放出來。?

在未來不久，創(chuàng)作者只需要在MuscleDrive上傳一個(gè)基礎(chǔ)模型，AVATARY就可以自動(dòng)生成47塊肌肉，并通過肌肉仿真引擎，為用戶生成最自然的表情動(dòng)畫——這不知道將會(huì)讓多少3D動(dòng)畫師們做夢(mèng)都會(huì)笑出來。??

海內(nèi)外的反饋?

2021年2月，F(xiàn)ACEGOOD團(tuán)隊(duì)上線了公測(cè)版AVATAR STUDIO，并面對(duì)高校、數(shù)字媒體藝術(shù)各領(lǐng)域從業(yè)者及行業(yè)內(nèi)頂尖動(dòng)畫公司展開測(cè)試和交流。?

經(jīng)歷81天的產(chǎn)品打磨周期后，2021年5月，F(xiàn)ACEGOOD宣布Avatar Studio正式版AVATARY上線，并開放免費(fèi)下載。?

上線短短一個(gè)月內(nèi)，AVATARY就收獲了騰訊、原力、追光、虎牙、疊紙、虛擬影業(yè)、達(dá)瓦未來等用戶，產(chǎn)品得到了頭部企業(yè)認(rèn)可。??

同時(shí)，F(xiàn)ACEGOOD表示，他們已經(jīng)同中央美術(shù)學(xué)院、中國(guó)傳媒大學(xué)等藝術(shù)院校合作，通過講座及相關(guān)課程，培養(yǎng)更多3D創(chuàng)作人才。?

2021年10月23日，國(guó)產(chǎn)原創(chuàng)動(dòng)漫形象舞臺(tái)競(jìng)演節(jié)目《2060》在江蘇衛(wèi)視播出。據(jù)悉，全季26個(gè)V-life（虛擬形象）的表情捕捉，全部采用FACEGOOD技術(shù)。?

現(xiàn)場(chǎng)觀眾跟評(píng)委們還可以實(shí)時(shí)跟V-life進(jìn)行互動(dòng)，讓觀眾可以沉浸式體驗(yàn)，打開了人們對(duì)虛擬形象的更多想象空間。

包括很多海外影視、動(dòng)畫、虛擬偶像等領(lǐng)域公司及個(gè)人創(chuàng)作者對(duì)AVATARY海外版都期待已久。?

2021年7月10日，AVATARY海外版正式上線，自上線以來，在海外的官方平臺(tái)也受到了大量關(guān)注。?

日本導(dǎo)演、3D藝術(shù)家橫原大和（HirikazuYokahara），在今年8月份發(fā)布的一段使用AVATARY和D2進(jìn)行離線制作的測(cè)試DEMO，一天內(nèi)即引發(fā)了業(yè)內(nèi)近萬人的點(diǎn)贊，并隨之也引來了其他幾位業(yè)內(nèi)大神的關(guān)注。

國(guó)貨之光AVATARY打破了原來在面捕技術(shù)上的局限，能讓大家以更短的時(shí)間做出更好的效果；并同時(shí)能夠深入用戶群系中，了解用戶痛點(diǎn)，幫助用戶解決問題，因此獲得了海外用戶的認(rèn)同。??

當(dāng)下，AVATARY海外版已經(jīng)觸達(dá)38個(gè)國(guó)家 400多個(gè)團(tuán)隊(duì)……相較于國(guó)內(nèi)市場(chǎng)，成熟的海外市場(chǎng)，可能會(huì)為AVATARY帶來更大的施展空間。FACEGOOD歷時(shí)5年沉淀而出的面部制作技術(shù)，將會(huì)造福全球的3D內(nèi)容創(chuàng)作者。

創(chuàng)始人Q&A解答

只短短幾年時(shí)間，F(xiàn)ACEGOOD團(tuán)隊(duì)是如何在細(xì)分垂直技術(shù)領(lǐng)域迅速成長(zhǎng)為國(guó)際領(lǐng)先的企業(yè)的？AVATARY要怎么贏利？我們帶著一些問題，采訪了FACEGOOD的創(chuàng)始人&CEO王全偉（以下簡(jiǎn)稱JELO）。?

學(xué)術(shù)趴：FACEGOOD最初為何想要做工業(yè)軟件？?

JELO：我們學(xué)科有三大浪漫：編譯器、操作系統(tǒng)、圖形學(xué)。?

我以前是做編譯器的，就是把編程語言翻譯成二進(jìn)制，是興趣也是首次創(chuàng)業(yè)，也是第一桶金。后來2015年二次創(chuàng)業(yè)，一心想做3D工業(yè)軟件，就開發(fā)了粒子特效引擎，發(fā)展了十多家企業(yè)用戶，這是第一個(gè)產(chǎn)品。?

一年后我去了一趟Weta Digital，運(yùn)氣很不錯(cuò)，當(dāng)時(shí)阿凡達(dá)2跟3正在拍攝，他們徹底改變了我對(duì)RnD的認(rèn)知，回國(guó)后堅(jiān)定了主攻方向——軟體仿真。這個(gè)方向?qū)W科跨度非常大，計(jì)算力學(xué)難度很高，但是我們以前做編譯器養(yǎng)成的風(fēng)格就是越難越興奮……軟體仿真？有限元？不會(huì)不要緊，可以從頭搞起！?

我們團(tuán)隊(duì)保持著一個(gè)進(jìn)攻狀態(tài)，從技術(shù)上要完成“追趕”，“追平”，“超越”三步走，就這樣在軟體上的執(zhí)念就算開始了，“軟體仿真工業(yè)軟件”太酷了！?

2016年我們接到了第一單，全程陪跑負(fù)責(zé)動(dòng)畫《地靈曲》表情捕捉解決方案的定制開發(fā)，2017年武漢兩點(diǎn)十分成為我們表情捕捉產(chǎn)品第一個(gè)用戶。?

學(xué)術(shù)趴：FACEGOOD這一團(tuán)隊(duì)是在怎樣的背景下建立起來的？團(tuán)隊(duì)構(gòu)成是怎樣的？大家平時(shí)的工作氛圍如何？?

JELO：創(chuàng)業(yè)搞研發(fā)我們很窮，招人上還特別挑，“你喜歡我們做的技術(shù)嗎，來一起做吧”，就這樣召集了一群因?yàn)榕d趣聚在一起的同事。?

就像其他創(chuàng)業(yè)者一樣每天面臨的都是困難跟短板，我們也有發(fā)不下工資的時(shí)候，團(tuán)隊(duì)非但沒垮，還研發(fā)了最好的產(chǎn)品，依靠的就是“興趣第一，啃最硬的骨頭做最有趣的技術(shù)”，困難是暫時(shí)的，只要方向?qū)鸵欢苄?，這樣的信念。?

學(xué)術(shù)趴：團(tuán)隊(duì)在5年的產(chǎn)品研發(fā)過程中，遇到的最大困難是什么？?

JELO：非官方純民間搞5年研發(fā)很不可思議。因?yàn)槲覀兪亲鰐oB工業(yè)算法的，也就是解決工業(yè)問題的，用戶要求精度沒有盡頭，這就導(dǎo)致我們需要不斷捅天花板。?

但我們是這么理解的，有門檻才有價(jià)值，技術(shù)的盡頭是藝術(shù)。藝術(shù)沒有盡頭，生命不息研發(fā)不止。?

學(xué)術(shù)趴：FACEGOOD為何會(huì)免費(fèi)發(fā)布軟件下載，又會(huì)如何盈利？?

JELO：我們的硬件價(jià)格只有老外的1%，軟件又免費(fèi)下載，企業(yè)怎么掙錢？?

我們產(chǎn)品的定位是“賦能全球3D內(nèi)容從業(yè)者”，讓每一個(gè)從業(yè)者能用上最好的技術(shù)，就像是把一個(gè)法拉利交給用戶去通勤上下班，創(chuàng)作效能提高了用戶賺錢了，我們自然就賺錢了，這是一個(gè)生態(tài)……我們最怕的是產(chǎn)品沒價(jià)值，解決不了問題沒人用，相反用的人越多越好。?

學(xué)術(shù)趴：未來FACEGOOD又會(huì)基于當(dāng)下的產(chǎn)品做出哪些嘗試？?

JELO：在創(chuàng)業(yè)五年之后我們停掉了定制開發(fā)，全面開始產(chǎn)品化。?

成熟的技術(shù)一定能產(chǎn)品化，好的產(chǎn)品一定能讓更多人受益，目前FACEGOOD產(chǎn)品Avatary上線半年，已在全球38個(gè)國(guó)家地區(qū)，400多個(gè)團(tuán)隊(duì)使用其進(jìn)行3D內(nèi)容制作，其中涉及游戲、動(dòng)畫、電影、VR/AR、數(shù)字人、虛擬直播等主要應(yīng)用場(chǎng)景。創(chuàng)作者生態(tài)已經(jīng)在逐漸形成。?

未來我們會(huì)推出一系列“計(jì)劃”為我們的用戶創(chuàng)造更多價(jià)值，賦能、加速、孵化三個(gè)維度全面服務(wù)3D內(nèi)容創(chuàng)作者。最后我想說的是表情捕捉是FACEGOOD一個(gè)起點(diǎn)，不是終點(diǎn)，未來一年還有大菜上桌。

FACEGOOD團(tuán)隊(duì)的最終愿景，即賦能全球的3D內(nèi)容創(chuàng)作者。也希望在這個(gè)過程中，用先進(jìn)創(chuàng)新的技術(shù)，助力各類3D內(nèi)容應(yīng)用場(chǎng)景的構(gòu)建，在國(guó)際主流3D工業(yè)軟件舞臺(tái)有國(guó)產(chǎn)一席之地。?

本文來自「動(dòng)畫學(xué)術(shù)趴」，未經(jīng)授權(quán)請(qǐng)勿轉(zhuǎn)載。