近年來(lái)，隨著元宇宙概念的火熱，虛擬直播也逐漸被大家熟知，相比于傳統(tǒng)的直播模式，虛擬直播利用計(jì)算機(jī)技術(shù)和 AR/VR技術(shù)，通過(guò)三維建模、實(shí)時(shí)渲染合成等手段，將虛擬形象或虛擬場(chǎng)景與真實(shí)世界的物體、環(huán)境進(jìn)行融合，打造出沉浸式的觀看體驗(yàn)。那么，虛擬直播的核心技術(shù)到底是什么呢？為什么它能夠突破傳統(tǒng)直播的瓶頸呢？讓我們一起來(lái)了解一下吧。

vLive虛擬直播是元宇宙時(shí)代的直播新方式，是元宇宙數(shù)字內(nèi)容交互生產(chǎn)的載體。

運(yùn)用5G+實(shí)時(shí)渲染技術(shù)，在綠幕環(huán)境下進(jìn)行拍攝，通過(guò)Studio Bridge傳輸?shù)皆贫?，?shí)時(shí)完成摳像、融合與數(shù)字化，再推流到全直播平臺(tái)。廣泛應(yīng)用于電商直播、娛樂(lè)直播、在線教育、虛擬發(fā)布會(huì)等領(lǐng)域。

?

虛擬制片技術(shù)

通過(guò)運(yùn)用虛擬制片技術(shù)，即通過(guò)計(jì)算機(jī)實(shí)時(shí)渲染圖像與真實(shí)演員的表演融合在一起，在拍攝現(xiàn)場(chǎng)就能將完整的、帶有特效、光效的畫(huà)面實(shí)時(shí)渲染，并且能夠?qū)崟r(shí)可視化呈現(xiàn)的一種全新直播方式。

????

3D建模技術(shù)

傳統(tǒng)的直播通常利用綠幕拍攝實(shí)時(shí)摳像，再疊加平面的圖片或視頻作為背景，合成后推流到直播平臺(tái)。目前大部分綠幕直播都屬于這一類，節(jié)約了硬裝修成本。但缺點(diǎn)也很明顯，背景缺少空間透視關(guān)系，代入感不強(qiáng)。場(chǎng)景是虛擬直播的核心，利用3D建模技術(shù)具有靈活度高、高逼真度、能夠?qū)崿F(xiàn)復(fù)雜模型等特點(diǎn)，可以更好地還原出真實(shí)世界的場(chǎng)景。

目前，3D建模技術(shù)主要有以下幾種：

1.三維建模：通過(guò)3D建模技術(shù)將一個(gè)場(chǎng)景進(jìn)行三維立體重建，展現(xiàn)出場(chǎng)景中的各個(gè)元素；

2.計(jì)算機(jī)圖形學(xué)：將3DMAX、 Maya等軟件進(jìn)行整合，創(chuàng)建出一個(gè)虛擬世界的模型；

3.渲染引擎：通過(guò)渲染引擎將所需的圖像和視頻進(jìn)行渲染輸出。

?

實(shí)時(shí)渲染技術(shù)

實(shí)時(shí)渲染技術(shù)可以根據(jù)直播的需求，對(duì)虛擬人物或場(chǎng)景進(jìn)行建模，然后利用渲染引擎將模型從一個(gè)點(diǎn)變成面、再變成體。此外，在實(shí)時(shí)渲染技術(shù)中，除了虛擬人物建模和三維場(chǎng)景建模外，還需要對(duì)實(shí)時(shí)場(chǎng)景進(jìn)行實(shí)時(shí)渲染。在場(chǎng)景中的每個(gè)點(diǎn)都需要被實(shí)時(shí)地更新、計(jì)算。這一點(diǎn)也是實(shí)現(xiàn)虛擬直播效果的關(guān)鍵環(huán)節(jié)。

數(shù)字人是元宇宙數(shù)字內(nèi)容交互的載體，鏈接了現(xiàn)實(shí)世界與虛擬世界。

角色驅(qū)動(dòng)技術(shù)

當(dāng)虛擬直播接入數(shù)字人直播時(shí)，角色驅(qū)動(dòng)技術(shù)主要分為物理驅(qū)動(dòng)和渲染驅(qū)動(dòng)。物理驅(qū)動(dòng)就是通過(guò)建模，將演員的模型制作出來(lái)，并與演員的動(dòng)作相匹配。渲染驅(qū)動(dòng)則是通過(guò)在渲染引擎中為每一個(gè)角色創(chuàng)建一個(gè)單獨(dú)的動(dòng)畫(huà)，并將其與演員的動(dòng)作進(jìn)行綁定。觀眾可以在播放時(shí)，直接在屏幕上看到演員的動(dòng)作和狀態(tài)。

?

AI實(shí)時(shí)動(dòng)作捕捉技術(shù)

在虛擬直播中，實(shí)時(shí)動(dòng)作捕捉技術(shù)是一項(xiàng)必不可少的關(guān)鍵技術(shù)，它是指通過(guò)動(dòng)態(tài)捕捉設(shè)備，將主播的面部表情、肢體動(dòng)作等捕捉下來(lái)，并通過(guò)三維建模技術(shù)將這些動(dòng)作和表情呈現(xiàn)在虛擬主播身上，從而使虛擬主播的動(dòng)作與真人主播高度一致。

目前，市面上常用的實(shí)時(shí)動(dòng)作捕捉設(shè)備有兩種，一種是傳統(tǒng)的視頻捕獲設(shè)備（如光學(xué)攝像機(jī)），另一種是基于攝像頭的深度相機(jī)（如結(jié)構(gòu)光攝像機(jī)）。兩種設(shè)備都可以實(shí)時(shí)采集人、物的動(dòng)作數(shù)據(jù)并將其保存到計(jì)算機(jī)中，但由于光學(xué)攝像機(jī)無(wú)法獲取人物的面部表情信息和深度信息，所以在實(shí)時(shí)性方面會(huì)有一定限制。而結(jié)構(gòu)光攝像機(jī)由于可以采集到更多的面部表情信息和深度信息，因此它具有更高的實(shí)時(shí)性。

?

動(dòng)捕設(shè)備和采集設(shè)備

目前，市場(chǎng)上的虛擬直播主要分為動(dòng)捕設(shè)備和采集設(shè)備兩大類。動(dòng)捕設(shè)備是一種基于物理感應(yīng)的虛擬物體追蹤技術(shù)，主要用于實(shí)時(shí)動(dòng)作捕捉。動(dòng)捕設(shè)備可以通過(guò)傳感器直接與攝像機(jī)、人物、背景等發(fā)生物理互動(dòng)，并將物體和人體的運(yùn)動(dòng)軌跡數(shù)據(jù)傳輸?shù)诫娔X中，從而實(shí)現(xiàn)對(duì)人體或物體的實(shí)時(shí)跟蹤。而采集設(shè)備則是一種通過(guò)專業(yè)采集設(shè)備來(lái)實(shí)現(xiàn)對(duì)人體或物體運(yùn)動(dòng)軌跡數(shù)據(jù)采集的技術(shù)。采集設(shè)備能夠?qū)⑷梭w或物體的運(yùn)動(dòng)軌跡數(shù)據(jù)實(shí)時(shí)傳輸?shù)诫娔X中，從而實(shí)現(xiàn)對(duì)人體或物體的實(shí)時(shí)追蹤和分析。目前，采集設(shè)備主要分為三種：人/機(jī)器人跟蹤器、視頻采集卡和攝像機(jī)。其中，攝像機(jī)是最為常用的采集設(shè)備。

藍(lán)海創(chuàng)意云元宇宙技術(shù)支撐服務(wù)

依托藍(lán)海創(chuàng)意云數(shù)字內(nèi)容生產(chǎn)全流程服務(wù)體系所構(gòu)建的元宇宙時(shí)代數(shù)字基建能力，結(jié)合過(guò)去十年積累的云端超大規(guī)模視覺(jué)計(jì)算能力和超高清視頻低延時(shí)傳輸技術(shù)，成功打造了國(guó)內(nèi)領(lǐng)先的元宇宙技術(shù)支撐服務(wù)能力。

為什么垂直行業(yè)可以在元宇宙打通最后一厘米，和用戶實(shí)現(xiàn)全時(shí)、全量和全域的親密接觸？元宇宙商業(yè)成功的關(guān)鍵因素主要有兩個(gè)，其一是對(duì)客戶需求和運(yùn)營(yíng)交付的洞察，其二便是對(duì)客戶關(guān)系和客戶流量的運(yùn)營(yíng)，在這兩個(gè)關(guān)鍵方面垂直行業(yè)是具有競(jìng)爭(zhēng)力的。

?未來(lái)十到十五年的歷史性變化是非常值得我們期待和觀察的，元宇宙作為數(shù)字時(shí)代的躍遷者，是眾多數(shù)字技術(shù)的集成創(chuàng)新，其未來(lái)發(fā)展勢(shì)頭仍然強(qiáng)勁，應(yīng)用場(chǎng)景和生態(tài)也將得到進(jìn)一步的完善。