2000萬人預(yù)約的《星球:重啟》,在數(shù)字人制作中用到了怎樣的技術(shù)?
2023年11月16日,由
字節(jié)跳動旗下朝夕光年工作室打造的大型科幻生存游戲《星球:重啟》
正式公測,這款備受期待的
游戲預(yù)約人數(shù)已經(jīng)突破2000萬
大關(guān)。 去年九月份,在一個(gè)由NVIDIA舉辦的技術(shù)分享活動中,
李星瀾團(tuán)隊(duì)負(fù)責(zé)人山謙老師
和
朝夕光年江南游戲工作室AI技術(shù)負(fù)責(zé)人四道老師
就深入分享了數(shù)字人李星瀾的制作思路和實(shí)現(xiàn)技術(shù)。 讓我們一起了解數(shù)字人李星瀾的幕后故事。
01李星瀾震撼亮相
早在去年4月份,李星瀾就開始為一款名為
《代號降臨》
的游戲進(jìn)行宣傳,這款游戲也就是《星球:重啟》的前身。數(shù)字人項(xiàng)目立項(xiàng)則在更早的
21年8月
,首曝視頻發(fā)布前,就已經(jīng)經(jīng)歷了2次迭代。
李星瀾團(tuán)隊(duì)負(fù)責(zé)人山謙老師
稱,他們的最終目標(biāo)是
打造一個(gè)具有強(qiáng)大實(shí)時(shí)性能且支持離線制作功能的虛擬偶像
,不僅可以用于支持直播,還可以支持照片、視頻制作及游戲中的AI助手功能。
在自媒體的運(yùn)營上,李星瀾多次參與曝光事件,包括
《星球:重啟》首曝
,
巨量引擎文旅生態(tài)大會
,以及
與文雀樂隊(duì)的合作
等。其中,單條視頻
《噓》
在
全網(wǎng)范圍內(nèi)取得700多萬的播放量
,表現(xiàn)不俗。
02李星瀾的幕后支持
李星瀾的高質(zhì)量呈現(xiàn),源于幕后技術(shù)團(tuán)隊(duì)日以繼夜的研發(fā)和精心打磨。
江南游戲工作室AI技術(shù)負(fù)責(zé)人四道老師
透露,李星瀾在制作初期涉及到的流程極為復(fù)雜,包括
面部掃描、拓?fù)淝謇?、表情?yōu)化、貼圖優(yōu)化、自動綁定、毛發(fā)制作、面部微表情、身體捕捉、重定向
等。 為了達(dá)到優(yōu)質(zhì)效果,
江南游戲工作室自主研發(fā)了
很多制作工具,如
JN-Helmet、JN-FaceCapAPP、JN-MotionCap system
等,大幅提升了制作調(diào)試效率,為團(tuán)隊(duì)
節(jié)省了大量時(shí)間成本
。即便在前期考慮到
實(shí)時(shí)演算對性能的影響
而設(shè)計(jì)成短發(fā)形象,且有自研工具的加持的情況下,仍需要經(jīng)過大量的調(diào)整和優(yōu)化,以確保最終呈現(xiàn)出的效果能夠令人滿意。
同樣的,實(shí)現(xiàn)與李星瀾在直播中的實(shí)時(shí)互動,也需要專業(yè)團(tuán)隊(duì)的大量投入。驅(qū)動機(jī)器人需要包含三個(gè)關(guān)鍵模塊的協(xié)作,分別是
交互理解、智能對話管理、智能驅(qū)動
。這些內(nèi)容均需要反復(fù)調(diào)試優(yōu)化,讓角色更加真實(shí)自然。 在完成以上所有內(nèi)容后,團(tuán)隊(duì)還需要對李星瀾的整體效果進(jìn)行合理把控,使其保持在在二次元與超寫實(shí)之間的“2.8D”效果,以避免出現(xiàn)“恐怖谷原理”這種現(xiàn)象,導(dǎo)致用戶的好感度急劇下降。 通過江南游戲工作室的努力,李星瀾最終也成功地實(shí)現(xiàn)了高品質(zhì)的呈現(xiàn)與互動效果,成為了
現(xiàn)象級的虛擬偶像
。
03迪生動作捕捉服務(wù)
上文提到
數(shù)字人李星瀾的研發(fā)涉及很多生產(chǎn)工具
,其中江南游戲工作室在迪生為其提供的
肢體和手指方面的動捕技術(shù)解決方案的基礎(chǔ)上
,專注于手部動作模型庫的構(gòu)建,實(shí)現(xiàn)手部動作的精細(xì)度和逼真度的技術(shù)追求。
當(dāng)然,隨著技術(shù)的更新迭代,迪生數(shù)字提供的
Shōgun動作捕捉軟件也迎來了1.10版本
。這次升級中最重要的功能升級就是手指跟蹤精準(zhǔn)性的優(yōu)化。
得益于
世界頂級的動作捕捉相機(jī)和軟件算法支持
,Shōgun1.10版本能讓用戶捕捉到
手指的微小動作和姿勢變化
。這意味著數(shù)字人李星瀾的手部動作捕捉現(xiàn)在可以呈現(xiàn)出符合需求的動作,且無需自研動作庫的支持。這種升級不僅提高數(shù)字人的整體表現(xiàn)效果,也進(jìn)一步
增強(qiáng)了用戶與數(shù)字人之間的互動體驗(yàn)
。
迪生數(shù)字致力于數(shù)字人領(lǐng)域的研發(fā)和應(yīng)用,擁有豐富的經(jīng)驗(yàn)和領(lǐng)先的技術(shù)實(shí)力。
迪生數(shù)字不斷探索和創(chuàng)新,為數(shù)字人的研發(fā)提供了全面的技術(shù)支持。從身體動作捕捉到手指跟蹤,迪生數(shù)字都展現(xiàn)出了卓越的技術(shù)實(shí)力。
專業(yè)團(tuán)隊(duì)和高效服務(wù)
可以幫助更多工作室實(shí)現(xiàn)
數(shù)字人的定制化應(yīng)用需求
。未來,迪生數(shù)字將繼續(xù)
探索數(shù)字人領(lǐng)域的研發(fā)和應(yīng)用
,為更多客戶提供高品質(zhì)、個(gè)性化的數(shù)字人解決方案!