面向移動(dòng)端!OPPO自研推理引擎加入LF AI&Data基金會(huì),助力開(kāi)發(fā)
當(dāng)下時(shí)代,越來(lái)越多的深度學(xué)習(xí)推理任務(wù)從云端轉(zhuǎn)移到移動(dòng)端,移動(dòng)平臺(tái)上的深度學(xué)習(xí)推理場(chǎng)景需要解決硬件平臺(tái)、驅(qū)動(dòng)、編譯優(yōu)化、模型壓縮、算子算法優(yōu)化和部署等諸多問(wèn)題,而現(xiàn)有的推理平臺(tái)與第三方庫(kù)和硬件平臺(tái)又通常存在驅(qū)動(dòng)適配、模型驗(yàn)證、數(shù)據(jù)交互等問(wèn)題,從而導(dǎo)致對(duì)應(yīng)的優(yōu)化部署和維護(hù)升級(jí)過(guò)程繁瑣。同時(shí),移動(dòng)平臺(tái)對(duì)圖形圖像類(lèi)應(yīng)用的實(shí)時(shí)性和功耗要求也越來(lái)越高。
(OPPO)
為了解決這些問(wèn)題,最近OPPO就宣布向LF AI&Data基金會(huì)無(wú)償捐贈(zèng)一項(xiàng)AI項(xiàng)目——ShaderNN,它是業(yè)界首個(gè)支持OpenGL和Vulkan全圖形棧的高效輕量推理引擎,面向移動(dòng)端圖形、圖像、游戲?qū)崟r(shí)AI應(yīng)用。專(zhuān)注于通過(guò)GPU著色器進(jìn)行推理加速,基于原生OpenGL ES和Vulkan構(gòu)建,可以輕松與圖形渲染管線(xiàn)深度集成,最大限度地利用計(jì)算資源,具有通用性、高性能、可移植性、可擴(kuò)展性,推理時(shí)間及平均功耗比同行業(yè)推理引擎在典型場(chǎng)景有顯著優(yōu)勢(shì)。
(Vulkan)
據(jù)悉ShaderNN加入LF AI&Data基金會(huì)沙箱項(xiàng)目后,通過(guò)在基金會(huì)內(nèi)部的合作,可以為開(kāi)發(fā)者帶來(lái)更快捷的開(kāi)發(fā)體驗(yàn),讓手機(jī)用戶(hù)獲得更流暢、更沉浸真實(shí)的體驗(yàn)。
說(shuō)到沉浸的體驗(yàn),其實(shí)近年為了提升用戶(hù)的游戲感受,OPPO還做出了很多的努力,去年OPPO就在第五屆中國(guó)國(guó)際進(jìn)口博覽會(huì)“Unity元宇宙生態(tài)論壇”上宣布與全球?qū)崟r(shí)3D引擎巨頭Unity達(dá)成戰(zhàn)略合作,雙方將著力提升游戲畫(huà)質(zhì)及流暢性,為用戶(hù)打造更具沉浸感的游戲體驗(yàn),同時(shí)也為開(kāi)發(fā)者提供高效率的開(kāi)發(fā)環(huán)境,共建更加開(kāi)放友好的游戲生態(tài)。
(OPPO軟件戰(zhàn)略總監(jiān)張峻現(xiàn)場(chǎng)展示OPPO與Unity合作的技術(shù)成果)
像OPPO和Unity就在光線(xiàn)追蹤上進(jìn)行了合作,OPPO將自研光線(xiàn)追蹤算法集成到了Unity游戲開(kāi)發(fā)引擎中,打造游戲中真實(shí)的光影體驗(yàn)。據(jù)悉OPPO自研光線(xiàn)追蹤算法通過(guò)模擬光的物理行為,能夠展現(xiàn)實(shí)時(shí)動(dòng)態(tài)陰影、曲面反射、玻璃體折射等,極大的提升真實(shí)感渲染效果,對(duì)于游戲體驗(yàn)提升有很大的幫助。
(左:有光線(xiàn)追蹤的畫(huà)面,右:沒(méi)光線(xiàn)追蹤的畫(huà)面)
此外,OPPO在其它領(lǐng)域也是有著豐碩的成果。像OPPO的智能眼鏡OPPO Air Glass此前就憑借創(chuàng)新設(shè)計(jì)與自研技術(shù)脫穎而出,在美國(guó)佛羅里達(dá)州舉行的愛(ài)迪生頒獎(jiǎng)典禮被授予2023年愛(ài)迪生最佳新產(chǎn)品獎(jiǎng)?AR產(chǎn)品賽道銀獎(jiǎng),OPPO Air Glass還曾斬獲22年紅點(diǎn)設(shè)計(jì)大獎(jiǎng)和IF設(shè)計(jì)大獎(jiǎng),備受行業(yè)肯定。
(OPPO Air Glass)
OPPO之所以能夠在手機(jī)行業(yè),以及多個(gè)領(lǐng)域取得一定的成就,離不開(kāi)其對(duì)技術(shù)研發(fā)的重視。據(jù)悉截至目前,OPPO全球?qū)@暾?qǐng)量已經(jīng)超過(guò)90000件,全球授權(quán)數(shù)量超過(guò)46000件,PCT申請(qǐng)量全球TOP6,5G專(zhuān)利族宣稱(chēng)量全球TOP8,專(zhuān)利實(shí)力不言而喻。因此這也讓我們堅(jiān)信,在未來(lái)的發(fā)展過(guò)程中,OPPO一定還會(huì)給我們帶來(lái)更多讓人驚喜的產(chǎn)品,同時(shí)OPPO也將繼續(xù)與全球開(kāi)源社區(qū)建立更深入的合作,通過(guò)前沿技術(shù)的可持續(xù)發(fā)展與不斷落地,造福更多消費(fèi)者,大家不妨拭目以待吧。