FBEC2019 | 高通XR業(yè)務(wù)中國區(qū)負(fù)責(zé)人郭鵬:XR是下一代移動計算平臺
2019年12月5日,由中國通信工業(yè)協(xié)會虛擬現(xiàn)實(shí)專業(yè)委員會、由中國通信工業(yè)協(xié)會區(qū)塊鏈專業(yè)委員會、廣東省游戲產(chǎn)業(yè)協(xié)會、深圳市互聯(lián)網(wǎng)文化市場協(xié)會指導(dǎo),行業(yè)頭部媒體游戲陀螺、VR陀螺、陀螺電競、陀螺財經(jīng)、深圳區(qū)塊鏈技術(shù)與產(chǎn)業(yè)創(chuàng)新聯(lián)盟聯(lián)合的主辦2019未來商業(yè)生態(tài)鏈接大會暨第四屆金陀螺獎頒獎典禮(簡稱“FBEC2019”),在深圳市南山區(qū)深圳灣1號T7座鵬瑞萊佛士酒店宴會廳開幕。本屆大會以“蝶變 · 向上的力量”為主題,將一如既往的關(guān)注未來趨勢發(fā)展、行業(yè)創(chuàng)新升級、商業(yè)生態(tài)新鏈接等前沿領(lǐng)域。
?
本次大會邀請到高通XR業(yè)務(wù)中國負(fù)責(zé)人郭鵬帶來主題為“5G-加速實(shí)現(xiàn)XR世界”精彩分享,以下為演講實(shí)錄:
?

大家都知道,高通是產(chǎn)業(yè)鏈最上游的公司,我們的東西偏向底層和硬件,所以我今天的分享,相比于其他演講者,會更多從XR底層技術(shù)和硬件方面向大家做一些簡單的匯報。
?
?
5G、AI和XR的關(guān)系:相輔相成,互相呼應(yīng)
????高通成立30多年來,我們一直在引領(lǐng)著業(yè)界的創(chuàng)新;像最早的模擬通信到數(shù)字通信,從2G、3G、4G到現(xiàn)在的5G,從臺式電腦到后面智能手機(jī),就能辦很多以前在電腦上可以辦的事情?,F(xiàn)在我們認(rèn)為已經(jīng)到了一個時間點(diǎn),可以用我們目前已有的移動通信技術(shù)、智能手機(jī)技術(shù)擴(kuò)展到邊緣和萬物連接上,XR就是在萬物連接其中一個比較亮眼的一環(huán)。
剛才的嘉賓也講了一些IDC和其他的數(shù)據(jù),我們認(rèn)為有兩個數(shù)據(jù)是比較令人振奮的。首先是DIGI-Capital特的數(shù)據(jù),他認(rèn)為未來五年內(nèi)可以高達(dá)800億美元的價值。IDC2019年第二季度VR/AR頭顯季度跟蹤報告也顯示,從2019年600萬的出貨量可以增長到2023年6000萬的量。XR是非常新興的行業(yè),但也是非常有前景的行業(yè)。
說到XR,不得不說關(guān)于XR和5G和AI的關(guān)系。5G和AI這這兩年特別火的話題,我認(rèn)為它們是相輔相成,相互呼應(yīng)的關(guān)系。5G剛出來時,所有產(chǎn)業(yè)鏈的人都在想到底拿5G做什么,像3G、4G出來時我們守著2G,不知道3G、4G能夠做什么?,F(xiàn)在我們也在想這個問題,我們不知道未來幾年5G能催生什么殺手級應(yīng)用。
對于AI來講,一樣離不開XR。XR需要變得更加智能,不管是硬件、軟件還是應(yīng)用,都需要很強(qiáng)的AI能力,智能地分辨、感知,智能地做出人機(jī)交互的應(yīng)用場景。我們認(rèn)為5G、AI和XR是緊密聯(lián)系在一起的,它給消費(fèi)行業(yè)帶來價值,給企業(yè)應(yīng)用帶來價值,有很多細(xì)分行業(yè)我不多贅述。
?
?
XR是下一代移動計算平臺:解放雙手,擴(kuò)大視野
老調(diào)重談一次,高通堅(jiān)定地認(rèn)為XR是下一代移動計算平臺,像當(dāng)年智能手機(jī)替換掉PC一樣,我們認(rèn)為未來XR是有機(jī)會替換掉手機(jī)的。
最直觀的,我們現(xiàn)在能想到的和想不到的,現(xiàn)在只能說我們能想到的兩點(diǎn),最直觀的優(yōu)點(diǎn),XR可以解放雙手。為什么可以解放雙手?智能手機(jī)操作模式是根據(jù)智能手機(jī)目前的形態(tài)讓人類適應(yīng)它的操作模式,我們用兩個手指打字、觸屏。這個UI的操作模式已經(jīng)和之前看書、看報、用PC電腦、鼠標(biāo)鍵盤發(fā)生了很大的變化。這個變化得益于這家公司,從最開始智能手機(jī)九節(jié)編入了輸入輸出的模式。
從手機(jī)到XR有更大的變革,它解放我們的雙手,不再用手持著手機(jī)打字,用拇指做事情。我們可以用雙手在視野范圍內(nèi)和虛擬的物體做一種真實(shí)的接觸,同時不再需要只用一只拇指做輸入輸出,我們會用10個手指甚至手的一些細(xì)微動作,就可以做出XR交互性的事情,所以我們認(rèn)為解放雙方對于人類來說,是一個非常好的東西。
第二個,擴(kuò)大視野?,F(xiàn)在智能手機(jī)做到5寸、6寸是極限了,再往上做就是iPad了。如果戴上XR眼鏡,視野瞬間從20度、30度手機(jī)視野變成40度、50度大屏幕體驗(yàn)的視野,甚至當(dāng)你的眼鏡有三自由度定位、六自由度定位時,視野可以變成360度,甚至是6自由的360度,視野范圍內(nèi)都是屏幕,這相對于手機(jī)來講,是非常大的變革。XR不僅需要底層硬件廠商、零部件廠商、顯示光學(xué)廠商共同努力,同時還需要軟件應(yīng)用開發(fā)商一起打造這個產(chǎn)業(yè)。
?
?
AI與XR的關(guān)系:AI提升XR的體驗(yàn)
剛才已經(jīng)說了很多AI的東西,對于XR來說,AI意味著提升了終端側(cè)XR的體驗(yàn),也意味著提升了云端、邊緣端的XR體現(xiàn)。這里面AI有很多具體內(nèi)容,包括對情境、環(huán)境的感知,語音的識別、語音的交互。因?yàn)槟菚r候我們可能不再需要用打字輸入,很多時候是通過語音跟XR設(shè)備做交互,包括基于定位的感知。頭部定位、手柄或者手勢定位、面部表情定位等所有定位是根據(jù)非常復(fù)雜的感知算法實(shí)現(xiàn)。多媒體,怎么讓渲染變得更加智能化。VR上可以通過眼球追蹤,讓我們看到的地方是清晰的,余光范圍是模糊的。
在XR上,同樣可以用眼球追蹤,讓我們想知道的東西凸顯出來,而其他不關(guān)心的地方,依然是一個真實(shí)的物理世界。這是眼球跟蹤和局部渲染在XR上的應(yīng)用。渲染的真實(shí)性,對于光照的感知,讓渲染跟真實(shí)物理世界變得更加真實(shí),還有光照處理,都是AI在XR上的應(yīng)用。
?
5G技術(shù)的成熟:高帶寬、低延時
3G、4G基本到成熟或者頂峰,5G已經(jīng)來了。5G最大的兩個優(yōu)勢,高帶寬、低延遲。這兩個優(yōu)勢對于XR來講都是100%契合的東西。可以將原來10-50兆的帶寬提升到幾百兆的貸款,可以讓你有著更加豐富的多媒體應(yīng)用,可能從目前到8K甚至更高,同時還可以支持帶自由度的視頻,可以身臨其境的感受一場比賽,可以從場外走到場內(nèi),從場下走到場上,感受一場音樂會;這都是5G給你帶來的東西。
而低延時給你帶來云端渲染更加顯著的效果。我們知道,基于算力的局限性和功耗限制的局限性,沒有辦法把終端側(cè)的算力提升太高。因?yàn)楝F(xiàn)在電池技術(shù)還沒有做到強(qiáng)大的突破,但我們可以把很多很多算力放到云端。
而云端怎么把它的東西從云端快速傳到本地,對本地的定位、操作做一些快速的反應(yīng),從云端再反應(yīng)回來,這就需要一個特別特別快的管道,5G提供了這么一個完美的管道。我們認(rèn)為5G的發(fā)展,對于云端的渲染、邊緣云的應(yīng)用場景,會是極大的促進(jìn)。
?
XR的行業(yè)應(yīng)用:企業(yè)領(lǐng)域和消費(fèi)領(lǐng)域
XR正在變革企業(yè)領(lǐng)域。我們除了去發(fā)展很多很多消費(fèi)類的設(shè)備、游戲、視頻之外,也有很多合作伙伴去開拓企業(yè)級應(yīng)用的市場,包括工業(yè)、教育、旅游、政府、安防、警用、政務(wù),所有東西我們建成為行業(yè)應(yīng)用。
在行業(yè)應(yīng)用上,我提一下我們目前在做的項(xiàng)目,叫做XEP。這個項(xiàng)目旨在利用基于高通驍龍?zhí)幚砥?,比如工業(yè)控制、智慧醫(yī)療、文化旅游的開發(fā)者,讓他們把他們的軟件基于底層SDK做更深度的優(yōu)化。這樣可以讓軟件和硬件工作得更加契合,能夠打造更加優(yōu)質(zhì)的豐富體驗(yàn),給到消費(fèi)者或者行業(yè)應(yīng)用客戶。這是XR在企業(yè)級的變革,也是高通作為最上游的公司想為行業(yè)做的事情,希望通過這個把硬件給到開發(fā)者,讓開發(fā)者把他的東西更好的優(yōu)化,更好的提供給整個產(chǎn)業(yè)。
????剛才提了行業(yè)應(yīng)用,現(xiàn)在提一提基于消費(fèi)類的產(chǎn)品。它是基于手機(jī)消費(fèi)者場景。這個場景大概的意思是通過一個具有很強(qiáng)算力的手機(jī),我們可以將一個特別簡單的VR或AR眼鏡連接到手機(jī)上,有很多算力從眼鏡側(cè)挪到手機(jī)側(cè)。而手機(jī)需要做的是比較高端的CPU,比如驍龍855或者865,需要有一些顯示的接口和基于頭部定位的一些算法。而眼鏡側(cè)就不需要一個主鏡片,可以把它的攝像頭、顯示等工作量從眼鏡挪到手機(jī)。這個好處是手機(jī)是目前人人都有的東西,保有量非常大。眼鏡作為一個附件,可以提升你的視野,可以給你帶來更沉浸的感受。這是目前手機(jī)再往前擴(kuò)展一步一個新的方向。
我們也同樣把連接手機(jī)的頭顯計劃擴(kuò)展到HAP(硬件加速器計劃)里。我們以前在一體機(jī)范疇里尋找合作伙伴,比如屏幕廠商、攝像頭廠商、底層算法廠商?,F(xiàn)在我們會把這個計劃拓展至XR頭顯,連手機(jī)的頭顯,我們也跟業(yè)內(nèi)一些優(yōu)秀合作伙伴簽訂了協(xié)議,讓他的眼鏡基于高通驍龍高端芯片智能手機(jī)上連接起來更加穩(wěn)定、自然。
?
XR的兼容性:串流PC和邊緣云
????最后是關(guān)于移動XR和PC,XR的兼容性。我們有串流技術(shù),可以將渲染的工作量從眼鏡側(cè)、手機(jī)側(cè)挪到PC側(cè),甚至通過5G挪到邊緣云。因?yàn)镻C和邊緣云算力非常強(qiáng)大,不計功耗,顯示的渲染細(xì)膩程度非常好,渲染好之后可以通過高速WIFI或者5G傳到頭顯做呈現(xiàn)。
頭顯還做AI感知的東西,比如眼球跟蹤定位、手勢控制器定位,通過本地端和PC或者云端共同工作相互結(jié)合的特點(diǎn),可以使得目前XR設(shè)備基于目前特別輕便、簡單的移動設(shè)備,保證特別高的移動性的同時,還能享受到特別高的畫質(zhì),PC級的。這是我們在XR移動側(cè)和PC或者云端側(cè)所做的一些事情。我們最新的驍龍845甚至驍龍新發(fā)的865,都能支持這個串流技術(shù)。
這是一個簡單的XR頭顯和邊緣云交互的過程,可以通過5G高速帶寬、超低延遲實(shí)現(xiàn)分布式智能的效果。

?
高通與XR行業(yè)
????大家都知道,高通在最上游,我們提供的是芯片和底層的技術(shù)、底層的算法,我們也研發(fā)了一些先進(jìn)的算法。比如最基本的六自由度算法,還和很多優(yōu)秀合作伙伴把眼球跟蹤、手勢識別算法集成起來,所有的算法都能跑在芯片里,跑在硬件側(cè)。它是一個特別特別高效的算法,高性能、低功耗。
同時我們會把業(yè)界合作伙伴都結(jié)合到一起,把硬件屏幕顯示的、光學(xué)的、做底層技術(shù)的、算法的廠商結(jié)合,有一個HAP計劃。同時結(jié)合開發(fā)者有一個XEP計劃,把開發(fā)者集合起來,在目前已有的硬件設(shè)備商做優(yōu)化,最后我們推出給客戶的,除了剛才說的上層軟件整體解決方案之外,最顯著的是現(xiàn)在已有的已經(jīng)上市的設(shè)備。在這個圖上可以看到(見PPT),已經(jīng)有至少16款設(shè)備在市面上銷售,其中包括VR、AR、分體機(jī)、一體機(jī),也有接手機(jī)的VR或者AR。
到目前為止我們已經(jīng)有超過30款XR設(shè)備量產(chǎn)或者上市,正在研發(fā)中的也有超過二三十款產(chǎn)品。我們可以比較自豪的說,整個XR的半壁江山,硬件這塊基本都是基于高通芯片做的。確實(shí),芯片的能力、功耗、整體性能,在業(yè)界是比較優(yōu)秀的。
另外是我們的商業(yè)模式,從最上游把產(chǎn)品推廣到硬件合作伙伴,有OEM品牌廠商、ODM方案制造商,再把軟件平臺供應(yīng)商的軟件、平臺整合起來,把上層應(yīng)用也整合起來。同時還跟運(yùn)營商,比如韓國運(yùn)營商、國內(nèi)運(yùn)營商、日本運(yùn)營商一起做一些合作,把它的5G和我們的設(shè)備連接起來,打造更優(yōu)秀的一些應(yīng)用,最終我們的產(chǎn)品普惠到消費(fèi)者或者行業(yè)應(yīng)用領(lǐng)域。
我今天的分享就這些,可能在座有些人比較感興趣的話題是我們的新產(chǎn)品。因?yàn)檫@兩天大家都知道,如果關(guān)注媒體,可以看到我們的芯片發(fā)布會正在夏威夷進(jìn)行,而且還沒有結(jié)束。很多媒體已經(jīng)問過我,說我今天會講什么。但今天我還不能講什么,因?yàn)檫€需要一天時間我們的PR才能出來。
如果大家有興趣關(guān)注一下我們的官網(wǎng)或者媒體文章,應(yīng)該能發(fā)現(xiàn)在接下來幾天內(nèi)我們會有更多動作,尤其是在XR上,會有更新的產(chǎn)品推向市場,給市場持續(xù)注入新鮮的活力,謝謝大家!?