超V對話 | Facebook Reality Labs帶你走近VR/AR交互設(shè)計與內(nèi)容開發(fā)(下)
由VR陀螺聯(lián)合中國電信天翼云VR、人民網(wǎng)5G創(chuàng)新中心聯(lián)合打造首檔VR虛擬訪談節(jié)目《超V對話》第五期在天翼云VR App(4K VR版)、人民網(wǎng)5G頻道、騰訊視頻、Bilibili、優(yōu)酷、Youtube等各大視頻網(wǎng)站同步播出。
本期超V對話與數(shù)字虛擬影像精英論壇合作推出特別篇,對話Facebook(臉書)虛擬現(xiàn)實研究實驗室(Facebook Reality Labs)高級技術(shù)美術(shù)指導(dǎo)劉曉雨,其多年從事VR和AR相關(guān)的交互設(shè)計和3D研究開發(fā)工作,將從VR/AR交互、內(nèi)容開發(fā)、發(fā)展趨勢等多方面帶來干貨分享。

以下為本期訪談的下篇:
Q:之前劉老師也做過一些這種虛擬人,關(guān)于虛擬人我們會聽到兩種不同的聲音,一方面設(shè)計者想讓大家在VR里面感覺很真實,但是另一方面,因為太真實了反而會產(chǎn)生恐怖谷的效應(yīng)。所以您對這個觀點怎么看?您認(rèn)為我們是應(yīng)該要更真實,還是說我就只要實現(xiàn)互動,實現(xiàn)交流就好了?
?
劉曉雨:其實看 Facebook的Horizon就是一個很卡通的形象,它沒有做得非常真實。我覺得卡通和真實都是有它的用途的。像Facebook社交的Avatar數(shù)字角色,當(dāng)然卡通是可以接受的,因為大家知道那個是我在游戲里面的代表。我可以和你交流,只是我們的替身是一個卡通類的角色,我們不會覺得有什么奇怪。因為我們知道我們是在VR世界里,通過一個VR平臺來交流,沒有人會認(rèn)為這個是真的。就像你玩游戲一樣,你會覺得那游戲里面人不真,你就會沒有代入感。
?
但是我覺得現(xiàn)在有很多公司或者是游戲制作組,他們做的東西就是非常像真人。當(dāng)然非常像真人的趨勢是因為如果它是要表達(dá)非常真實的一個故事,比如說戰(zhàn)爭,比如說可能是人和人近距離的有感情的互動。那么你可能真的是需要一個很真實的人,在虛擬世界里才能表達(dá)出這個游戲的意思。當(dāng)然電影不用說了,電影不真不會有人看,游戲和電影這是兩方面。
?
如果你在未來會有一些購物的體驗,你可能會有一個卡通人陪你說話,用人工智能幫你采購或給你一些信息,會讓你覺得很有意思。我覺得做卡通和做真實這兩個方面的應(yīng)用都有,但是可能不會有很多人做真與假之間的角色,就是一個又不太像卡通又不太很真實的一個領(lǐng)域,因為你這樣做就會像你說的會出現(xiàn)那種恐怖谷的效應(yīng)。比如你看這個人,這是一個真的主播,他那個角色就顯得比較奇怪,有些恐怖的感覺,這可能就是你說的那種恐怖谷的因素。如果做不到很真實不會給人們感覺是在和一個真人交流,那么它就會產(chǎn)生恐怖谷效應(yīng)。

接近真人但又達(dá)不到真人的感覺就會讓人覺得恐怖,就像這個圖表一樣。但是如果你要做卡通,那么就可能有很多人會接受,比如說你看圖表里面,它的意思就是說下面這個(X軸)是3D的人物的逼真性,然后上面(Y軸)是人對模型的好感度,他是基于一個日本的機器學(xué)家做的研究。他發(fā)現(xiàn)當(dāng)你做一個角色或者機器人或仿真人,不管虛擬還是現(xiàn)實,你做到一定程度,越來越真,大家都會很有好感。因為他更像真人,更貼近自己。但當(dāng)他完成到一定程度之后,你會發(fā)現(xiàn)他和真人很類似,但是他到不了極其逼真的角色,就像電影級別那種逼真的話,那么你就可能會有一種生化危機的感覺,你會覺得他可能是一個僵尸,這就是所謂的恐怖谷的理論。
?
就是說你到達(dá)一定程度,不到100%的真實,只有90%左右,那么人和人之間的交流可能會變得比較奇怪,這樣看著就很恐怖,除非你的目的就是作為一個恐怖的游戲。
Q:VR中的這個皮膚材質(zhì)看著還是蠻真實的,您看這種會覺得恐怖嗎?
?
劉曉雨:我現(xiàn)在倒是沒覺得恐怖,但如果你是在一個VR的世界里休息,把燈都關(guān)掉了,你看到他,可能會覺得恐怖吧。它那里面其實有兩個曲線,有一個是虛線,有一個是實線,實線代表的是靜態(tài),虛線代表的是動態(tài),如果這個模型是不動的話,那么它的真實度可能不會像他動起來那么可怕;他如果真的動起來的話,他這個模型不是很真實的話,你可能會覺得恐怖度加倍。
Q:您之前其實也在微軟從事過相關(guān)的虛擬人的工作,你認(rèn)為虛擬人未來的潛力會體現(xiàn)在哪些方面呢?
?
劉曉雨:我覺得主要現(xiàn)在就是電影和游戲,這是兩個大家都知道的點,然后我覺得未來可能是語音助手,或者是在那種比如說B站主播,或者是Youtube主播這個領(lǐng)域會有一些應(yīng)用。比如說有些人會去做一些游戲的展示,做一些跳舞,才會有他自己的角色。
然后如果真的很多人開始用VR了,他會帶上頭盔去看,包括其他3D方面。比如你可能就會比較麻煩,現(xiàn)在有一種3D建模的技術(shù),需要有燈光進(jìn)入,棚里面有很多攝像機,然后他們會做一些不同的照相,把你3D模型建設(shè)出來,當(dāng)然最好的方法來建一個很真實的模型,這樣你就可以在3D的世界里面,利用你的表情或者是肢體來控制我,這兩種方法都可以。一種基于2D,一種基于3D,都可以模擬得很真實,但問題是會有人做不好的事情,就像一個名人的圖,他被別人用DeepFake把臉給替換掉了,然后換成他的聲音來宣布一些假新聞。如果你不是專家的話,至少看一次是看不出來的,所以說這東西還是挺恐怖的。
Q:剛剛您說的那種放到一個房間里面,用這種可見光建模,然后還有一些激光建?;蛏疃认鄼C的建模,您認(rèn)為真人建模技術(shù)現(xiàn)在是到了一個什么樣的階段呢?
?
劉曉雨:我可以說一下,剛才我說燈光的場景,比如說很多制作的公司都會有那種大的篷子,他們就會交替來制作這個模型,一、兩年前就有的一個技術(shù)。這一年出現(xiàn)的就是不僅是可以用攝像機和燈光來掃描人體模型,并且捕捉它的顏色,甚至可以用這種機器來掃描一個材質(zhì)的屬性,還有可能你要有個斗篷或者是,比如說手表之類的。
我很近距離的觀察,這是其中一個比較流行的材質(zhì)掃描,你可以拿一片皮或者一個金屬,然后你把它放在一個材質(zhì)掃描圓口上面,你需要讓這個機器運轉(zhuǎn),有時候是10分鐘、20分鐘,然后這個機器就會給你一系列的屬性,這是一個挺新的技術(shù)。這種東西就會挺有突破性的,它保證只要遵循這一套物理系統(tǒng),就可以把真實度保留下來。
?
Q:我這邊還有一些關(guān)于趨勢方向的提問想請老師解答一下。今年其實是VR發(fā)展的第5個年頭了,從很多早前的預(yù)測來看,發(fā)展是沒有達(dá)到之前的預(yù)期的,您怎么看待這個沒有達(dá)到之前的這種預(yù)期的原因?
?
劉曉雨:很多人對一項新的技術(shù)會有一種新鮮感,我覺得這項技術(shù)是非常有劃時代意義的,根據(jù)最近趨勢,我可能覺得過5到10年,我們能帶上VR頭盔跨時空真實地交流,像戴上一個很輕便的眼鏡一樣。第二個問題,我覺得很多因素都是人不可預(yù)計的,比如像當(dāng)時很多新興的技術(shù)出來,也沒有人預(yù)計它快或者慢,我覺得這也是很正常的。
Q:拋開技術(shù)上的一些門檻,您認(rèn)為VR這樣的一個新形態(tài)、一些新技術(shù),或者說VR游戲這樣的東西真正要走向用戶普及,最核心的需要解決的瓶頸是什么呢?
?
劉曉雨:首先我想說技術(shù)是最大的頂點,技術(shù)的瓶頸會導(dǎo)致很多其它的瓶頸,我相信就算技術(shù)完全解決或者是接近完全解決的話,也會有其他很多方面的問題。比如法律合不合理,你是不是可以用另外一個真實的人來控制它的模型;比如有些人想試VR,他可能試了兩下,他覺得很暈很難受;我覺得很多這些因素其實都是和技術(shù)息息相關(guān)。
?
Q:其實我們也看到海外的疫情影響,就有很多人在VR里面來辦一些這種大的虛擬活動,您可能覺得這會是一種過渡心態(tài)嗎?
?
劉曉雨:首先我其實沒有做過這種VR節(jié)目,但是我覺得今天我做了VR節(jié)目和您交流,就比2D視頻要更真實更貼近一些。哪怕沒有疫情,這種東西以后也會是一種趨勢。加上咱們現(xiàn)在只是比較普通的這種設(shè)備,就已經(jīng)有一種距離被拉近的感覺了。疫情可能會推動這方面的發(fā)展,就會開發(fā)出遠(yuǎn)程會議,大家會更愿意去使用現(xiàn)在咱們這個會議,技術(shù)的推動會讓VR會議變得更真實,這是我的想法。
?
Q:Facebook是整個布局最靠前的,甚至說是投入最大的一家公司, 您個人從團(tuán)隊的范圍或您的研究內(nèi)容來看,認(rèn)為未來引領(lǐng)這個領(lǐng)域的會是Facebook嗎?
?
劉曉雨:首先個人觀點,目前我當(dāng)然希望肯定是Facebook。因為我在Facebook工作,F(xiàn)acebook有很大的投入,最近幾年展示demo和發(fā)布會都是挺領(lǐng)先的。比如說手部追蹤都是非常好的,包括很多游戲已經(jīng)有手部追蹤的視線了。可能隨著平臺的開發(fā),有更多的人在做。Facebook的Oculus就很有潛力的,畢竟是之前最開始興起的一個VR公司,被Facebook收購,然后Facebook可以支持它做很多的開發(fā)和研究。Facebook更側(cè)重于用戶,因為它畢竟是一個社交平臺。我個人觀點認(rèn)為蘋果會把眼鏡當(dāng)成一個手機的附屬窗口作為一個開始。
Q:下面是觀眾提問環(huán)節(jié),這邊有個觀眾提問,剛才提到的材質(zhì)掃描儀能夠模擬物理效果嗎?
?
劉曉雨:不能模擬的,只能模擬視覺。它掃描后會生成一系列的貼圖,有一種貼圖是它的高光貼圖,有些地方是它的法線貼圖,舉個例子你去飯館,飯館里面的模型很真對不對,但是你從視覺上你不知道他是塑料,你覺得它是真的,但是如果掉在地上可能你就會發(fā)現(xiàn)是假的了,因為他們彈性屬性不同。
?
Q:未來面部識別的技術(shù)落地會達(dá)到什么樣的程度呢?
劉曉雨:面部識別的現(xiàn)實落地,在普通商用我看現(xiàn)在好像沒有,蘋果有一個開發(fā)平臺叫增強現(xiàn)實開發(fā),它是一套系統(tǒng),這個框架里面有功能,可以指揮蘋果手機去渲染或者是識別用攝像頭,他可以識別你的臉的肌肉變化。不單單是一個普通的模型,有時候識別的其實挺真實的,所以我覺得已經(jīng)很貼近了,如果你是個動畫師,會做一些3D,那么你自己都可以做一個游戲。
?
Q:這邊還有一個問題,認(rèn)為動畫專業(yè)對于VR研究有什么幫助呢?
?
劉曉雨:我覺得幫助還是挺大的,比如舉個例子,你做一套動畫系統(tǒng),在動畫系統(tǒng)里,它是按幀算,就跟電影一樣按幀算。技術(shù)是可以實現(xiàn)的,當(dāng)然了如果你說的動畫是廣義的,不僅是骨骼,可能還有視覺上的東西,那么它的應(yīng)用范圍就更廣了,比如說你以后在虛擬現(xiàn)實里面做模擬駕駛,把3C圖像給機器識別出來,哪個是燈,哪個是路,哪個是人,自駕車在經(jīng)過學(xué)習(xí)后,就會去躲避或者是剎車,或者是根據(jù)情況來決定他怎么走,這種應(yīng)用是非常關(guān)鍵的。
上篇回顧:
超V對話 | Facebook Reality Labs帶你走近VR/AR交互設(shè)計與內(nèi)容開發(fā)(上)
??第一時間了解XR資訊??
??關(guān)注VR陀螺官網(wǎng)(vrtuoluo.cn)
VR陀螺的聯(lián)系方式:
商務(wù)合作?|?采訪?|?投稿?:
西瓜(微信號?18659030320)
尤加(微信號?13129537525)
文靜(微信號??mutou_kiki)交流分享?|?爆料:案山子?(微信 shimotsuki_jun)
投稿郵箱:tougao@youxituoluo.com