由VR陀螺聯(lián)合中國電信天翼云VR、人民網(wǎng)5G創(chuàng)新中心聯(lián)合打造首檔VR虛擬訪談節(jié)目《超V對(duì)話》第五期在天翼云VR App（4K VR版）、人民網(wǎng)5G頻道、騰訊視頻、Bilibili、優(yōu)酷、Youtube等各大視頻網(wǎng)站同步播出。

本期超V對(duì)話與數(shù)字虛擬影像精英論壇合作推出特別篇，對(duì)話Facebook（臉書）虛擬現(xiàn)實(shí)研究實(shí)驗(yàn)室（Facebook Reality Labs）高級(jí)技術(shù)美術(shù)指導(dǎo)劉曉雨，其多年從事VR和AR相關(guān)的交互設(shè)計(jì)和3D研究開發(fā)工作，將從VR/AR交互、內(nèi)容開發(fā)、發(fā)展趨勢(shì)等多方面帶來干貨分享。

以下為本期訪談的下篇：

Q：之前劉老師也做過一些這種虛擬人，關(guān)于虛擬人我們會(huì)聽到兩種不同的聲音，一方面設(shè)計(jì)者想讓大家在VR里面感覺很真實(shí)，但是另一方面，因?yàn)樘鎸?shí)了反而會(huì)產(chǎn)生恐怖谷的效應(yīng)。所以您對(duì)這個(gè)觀點(diǎn)怎么看？您認(rèn)為我們是應(yīng)該要更真實(shí)，還是說我就只要實(shí)現(xiàn)互動(dòng)，實(shí)現(xiàn)交流就好了？

劉曉雨：其實(shí)看 Facebook的Horizon就是一個(gè)很卡通的形象，它沒有做得非常真實(shí)。我覺得卡通和真實(shí)都是有它的用途的。像Facebook社交的Avatar數(shù)字角色，當(dāng)然卡通是可以接受的，因?yàn)榇蠹抑滥莻€(gè)是我在游戲里面的代表。我可以和你交流，只是我們的替身是一個(gè)卡通類的角色，我們不會(huì)覺得有什么奇怪。因?yàn)槲覀冎牢覀兪窃赩R世界里，通過一個(gè)VR平臺(tái)來交流，沒有人會(huì)認(rèn)為這個(gè)是真的。就像你玩游戲一樣，你會(huì)覺得那游戲里面人不真，你就會(huì)沒有代入感。

但是我覺得現(xiàn)在有很多公司或者是游戲制作組，他們做的東西就是非常像真人。當(dāng)然非常像真人的趨勢(shì)是因?yàn)槿绻且磉_(dá)非常真實(shí)的一個(gè)故事，比如說戰(zhàn)爭，比如說可能是人和人近距離的有感情的互動(dòng)。那么你可能真的是需要一個(gè)很真實(shí)的人，在虛擬世界里才能表達(dá)出這個(gè)游戲的意思。當(dāng)然電影不用說了，電影不真不會(huì)有人看，游戲和電影這是兩方面。

如果你在未來會(huì)有一些購物的體驗(yàn)，你可能會(huì)有一個(gè)卡通人陪你說話，用人工智能幫你采購或給你一些信息，會(huì)讓你覺得很有意思。我覺得做卡通和做真實(shí)這兩個(gè)方面的應(yīng)用都有，但是可能不會(huì)有很多人做真與假之間的角色，就是一個(gè)又不太像卡通又不太很真實(shí)的一個(gè)領(lǐng)域，因?yàn)槟氵@樣做就會(huì)像你說的會(huì)出現(xiàn)那種恐怖谷的效應(yīng)。比如你看這個(gè)人，這是一個(gè)真的主播，他那個(gè)角色就顯得比較奇怪，有些恐怖的感覺，這可能就是你說的那種恐怖谷的因素。如果做不到很真實(shí)不會(huì)給人們感覺是在和一個(gè)真人交流，那么它就會(huì)產(chǎn)生恐怖谷效應(yīng)。

接近真人但又達(dá)不到真人的感覺就會(huì)讓人覺得恐怖，就像這個(gè)圖表一樣。但是如果你要做卡通，那么就可能有很多人會(huì)接受，比如說你看圖表里面，它的意思就是說下面這個(gè)（X軸）是3D的人物的逼真性，然后上面（Y軸）是人對(duì)模型的好感度，他是基于一個(gè)日本的機(jī)器學(xué)家做的研究。他發(fā)現(xiàn)當(dāng)你做一個(gè)角色或者機(jī)器人或仿真人，不管虛擬還是現(xiàn)實(shí)，你做到一定程度，越來越真，大家都會(huì)很有好感。因?yàn)樗裾嫒?，更貼近自己。但當(dāng)他完成到一定程度之后，你會(huì)發(fā)現(xiàn)他和真人很類似，但是他到不了極其逼真的角色，就像電影級(jí)別那種逼真的話，那么你就可能會(huì)有一種生化危機(jī)的感覺，你會(huì)覺得他可能是一個(gè)僵尸，這就是所謂的恐怖谷的理論。

就是說你到達(dá)一定程度，不到100%的真實(shí)，只有90%左右，那么人和人之間的交流可能會(huì)變得比較奇怪，這樣看著就很恐怖，除非你的目的就是作為一個(gè)恐怖的游戲。

Q：VR中的這個(gè)皮膚材質(zhì)看著還是蠻真實(shí)的，您看這種會(huì)覺得恐怖嗎？

劉曉雨：我現(xiàn)在倒是沒覺得恐怖，但如果你是在一個(gè)VR的世界里休息，把燈都關(guān)掉了，你看到他，可能會(huì)覺得恐怖吧。它那里面其實(shí)有兩個(gè)曲線，有一個(gè)是虛線，有一個(gè)是實(shí)線，實(shí)線代表的是靜態(tài)，虛線代表的是動(dòng)態(tài)，如果這個(gè)模型是不動(dòng)的話，那么它的真實(shí)度可能不會(huì)像他動(dòng)起來那么可怕；他如果真的動(dòng)起來的話，他這個(gè)模型不是很真實(shí)的話，你可能會(huì)覺得恐怖度加倍。

Q：您之前其實(shí)也在微軟從事過相關(guān)的虛擬人的工作，你認(rèn)為虛擬人未來的潛力會(huì)體現(xiàn)在哪些方面呢？

劉曉雨：我覺得主要現(xiàn)在就是電影和游戲，這是兩個(gè)大家都知道的點(diǎn)，然后我覺得未來可能是語音助手，或者是在那種比如說B站主播，或者是Youtube主播這個(gè)領(lǐng)域會(huì)有一些應(yīng)用。比如說有些人會(huì)去做一些游戲的展示，做一些跳舞，才會(huì)有他自己的角色。

然后如果真的很多人開始用VR了，他會(huì)帶上頭盔去看，包括其他3D方面。比如你可能就會(huì)比較麻煩，現(xiàn)在有一種3D建模的技術(shù)，需要有燈光進(jìn)入，棚里面有很多攝像機(jī)，然后他們會(huì)做一些不同的照相，把你3D模型建設(shè)出來，當(dāng)然最好的方法來建一個(gè)很真實(shí)的模型，這樣你就可以在3D的世界里面，利用你的表情或者是肢體來控制我，這兩種方法都可以。一種基于2D，一種基于3D，都可以模擬得很真實(shí)，但問題是會(huì)有人做不好的事情，就像一個(gè)名人的圖，他被別人用DeepFake把臉給替換掉了，然后換成他的聲音來宣布一些假新聞。如果你不是專家的話，至少看一次是看不出來的，所以說這東西還是挺恐怖的。

Q：剛剛您說的那種放到一個(gè)房間里面，用這種可見光建模，然后還有一些激光建?；蛏疃认鄼C(jī)的建模，您認(rèn)為真人建模技術(shù)現(xiàn)在是到了一個(gè)什么樣的階段呢？

劉曉雨：我可以說一下，剛才我說燈光的場(chǎng)景，比如說很多制作的公司都會(huì)有那種大的篷子，他們就會(huì)交替來制作這個(gè)模型，一、兩年前就有的一個(gè)技術(shù)。這一年出現(xiàn)的就是不僅是可以用攝像機(jī)和燈光來掃描人體模型，并且捕捉它的顏色，甚至可以用這種機(jī)器來掃描一個(gè)材質(zhì)的屬性，還有可能你要有個(gè)斗篷或者是，比如說手表之類的。

我很近距離的觀察，這是其中一個(gè)比較流行的材質(zhì)掃描，你可以拿一片皮或者一個(gè)金屬，然后你把它放在一個(gè)材質(zhì)掃描圓口上面，你需要讓這個(gè)機(jī)器運(yùn)轉(zhuǎn)，有時(shí)候是10分鐘、20分鐘，然后這個(gè)機(jī)器就會(huì)給你一系列的屬性，這是一個(gè)挺新的技術(shù)。這種東西就會(huì)挺有突破性的，它保證只要遵循這一套物理系統(tǒng)，就可以把真實(shí)度保留下來。

Q：我這邊還有一些關(guān)于趨勢(shì)方向的提問想請(qǐng)老師解答一下。今年其實(shí)是VR發(fā)展的第5個(gè)年頭了，從很多早前的預(yù)測(cè)來看，發(fā)展是沒有達(dá)到之前的預(yù)期的，您怎么看待這個(gè)沒有達(dá)到之前的這種預(yù)期的原因？

劉曉雨：很多人對(duì)一項(xiàng)新的技術(shù)會(huì)有一種新鮮感，我覺得這項(xiàng)技術(shù)是非常有劃時(shí)代意義的，根據(jù)最近趨勢(shì)，我可能覺得過5到10年，我們能帶上VR頭盔跨時(shí)空真實(shí)地交流，像戴上一個(gè)很輕便的眼鏡一樣。第二個(gè)問題，我覺得很多因素都是人不可預(yù)計(jì)的，比如像當(dāng)時(shí)很多新興的技術(shù)出來，也沒有人預(yù)計(jì)它快或者慢，我覺得這也是很正常的。

Q：拋開技術(shù)上的一些門檻，您認(rèn)為VR這樣的一個(gè)新形態(tài)、一些新技術(shù)，或者說VR游戲這樣的東西真正要走向用戶普及，最核心的需要解決的瓶頸是什么呢？

劉曉雨：首先我想說技術(shù)是最大的頂點(diǎn)，技術(shù)的瓶頸會(huì)導(dǎo)致很多其它的瓶頸，我相信就算技術(shù)完全解決或者是接近完全解決的話，也會(huì)有其他很多方面的問題。比如法律合不合理，你是不是可以用另外一個(gè)真實(shí)的人來控制它的模型；比如有些人想試VR，他可能試了兩下，他覺得很暈很難受；我覺得很多這些因素其實(shí)都是和技術(shù)息息相關(guān)。

Q：其實(shí)我們也看到海外的疫情影響，就有很多人在VR里面來辦一些這種大的虛擬活動(dòng)，您可能覺得這會(huì)是一種過渡心態(tài)嗎？

劉曉雨：首先我其實(shí)沒有做過這種VR節(jié)目，但是我覺得今天我做了VR節(jié)目和您交流，就比2D視頻要更真實(shí)更貼近一些。哪怕沒有疫情，這種東西以后也會(huì)是一種趨勢(shì)。加上咱們現(xiàn)在只是比較普通的這種設(shè)備，就已經(jīng)有一種距離被拉近的感覺了。疫情可能會(huì)推動(dòng)這方面的發(fā)展，就會(huì)開發(fā)出遠(yuǎn)程會(huì)議，大家會(huì)更愿意去使用現(xiàn)在咱們這個(gè)會(huì)議，技術(shù)的推動(dòng)會(huì)讓VR會(huì)議變得更真實(shí)，這是我的想法。

Q：Facebook是整個(gè)布局最靠前的，甚至說是投入最大的一家公司， 您個(gè)人從團(tuán)隊(duì)的范圍或您的研究內(nèi)容來看，認(rèn)為未來引領(lǐng)這個(gè)領(lǐng)域的會(huì)是Facebook嗎？

劉曉雨：首先個(gè)人觀點(diǎn)，目前我當(dāng)然希望肯定是Facebook。因?yàn)槲以贔acebook工作，F(xiàn)acebook有很大的投入，最近幾年展示demo和發(fā)布會(huì)都是挺領(lǐng)先的。比如說手部追蹤都是非常好的，包括很多游戲已經(jīng)有手部追蹤的視線了?？赡茈S著平臺(tái)的開發(fā)，有更多的人在做。Facebook的Oculus就很有潛力的，畢竟是之前最開始興起的一個(gè)VR公司，被Facebook收購，然后Facebook可以支持它做很多的開發(fā)和研究。Facebook更側(cè)重于用戶，因?yàn)樗吘故且粋€(gè)社交平臺(tái)。我個(gè)人觀點(diǎn)認(rèn)為蘋果會(huì)把眼鏡當(dāng)成一個(gè)手機(jī)的附屬窗口作為一個(gè)開始。

Q：下面是觀眾提問環(huán)節(jié)，這邊有個(gè)觀眾提問，剛才提到的材質(zhì)掃描儀能夠模擬物理效果嗎？

劉曉雨：不能模擬的，只能模擬視覺。它掃描后會(huì)生成一系列的貼圖，有一種貼圖是它的高光貼圖，有些地方是它的法線貼圖，舉個(gè)例子你去飯館，飯館里面的模型很真對(duì)不對(duì)，但是你從視覺上你不知道他是塑料，你覺得它是真的，但是如果掉在地上可能你就會(huì)發(fā)現(xiàn)是假的了，因?yàn)樗麄儚椥詫傩圆煌?/p>

Q：未來面部識(shí)別的技術(shù)落地會(huì)達(dá)到什么樣的程度呢?

劉曉雨：面部識(shí)別的現(xiàn)實(shí)落地，在普通商用我看現(xiàn)在好像沒有，蘋果有一個(gè)開發(fā)平臺(tái)叫增強(qiáng)現(xiàn)實(shí)開發(fā)，它是一套系統(tǒng)，這個(gè)框架里面有功能，可以指揮蘋果手機(jī)去渲染或者是識(shí)別用攝像頭，他可以識(shí)別你的臉的肌肉變化。不單單是一個(gè)普通的模型，有時(shí)候識(shí)別的其實(shí)挺真實(shí)的，所以我覺得已經(jīng)很貼近了，如果你是個(gè)動(dòng)畫師，會(huì)做一些3D，那么你自己都可以做一個(gè)游戲。

Q：這邊還有一個(gè)問題，認(rèn)為動(dòng)畫專業(yè)對(duì)于VR研究有什么幫助呢？

劉曉雨：我覺得幫助還是挺大的，比如舉個(gè)例子，你做一套動(dòng)畫系統(tǒng)，在動(dòng)畫系統(tǒng)里，它是按幀算，就跟電影一樣按幀算。技術(shù)是可以實(shí)現(xiàn)的，當(dāng)然了如果你說的動(dòng)畫是廣義的，不僅是骨骼，可能還有視覺上的東西，那么它的應(yīng)用范圍就更廣了，比如說你以后在虛擬現(xiàn)實(shí)里面做模擬駕駛，把3C圖像給機(jī)器識(shí)別出來，哪個(gè)是燈，哪個(gè)是路，哪個(gè)是人，自駕車在經(jīng)過學(xué)習(xí)后，就會(huì)去躲避或者是剎車，或者是根據(jù)情況來決定他怎么走，這種應(yīng)用是非常關(guān)鍵的。