本周大新聞|Vision Pro頭顯重磅發(fā)布;蘋果收購AR廠商Mira

本周XR大新聞,上周Quest 3發(fā)布之后,本周蘋果MR頭顯Vision Pro正式發(fā)布,也是本周AR/VR新聞的重頭戲。
AR方面,蘋果發(fā)布VST頭顯Vision Pro(雖然本質(zhì)是臺VR,但以AR場景為核心)以及visionOS;visionOS SDK月底上線;Object Capture支持iOS端;Kopin推出單色1英寸超大Micro LED模組。
VR方面,Meta將在SIGGRAPH 2023展示視網(wǎng)膜可變焦VR;Quest推出純手勢的虛擬鍵盤;惠牛發(fā)布兩款Pancake新品;億境三款產(chǎn)品亮相AWE 2023。
收購方面,蘋果收購AR頭顯廠商Mira;Vection收購VR方案商Invrsion。
融資方面,Micro LED廠商JBD完成B輪融資,阿里入股;消費級XR眼鏡品牌VITURE獲近千萬美金A+輪融資;VR企業(yè)培訓(xùn)平臺InstaVR完成10億日元融資;心理治療VR方案商BiPSEE獲得新一輪融資。
AR|蘋果Vision Pro正式發(fā)布

毫無疑問,蘋果Vision Pro就是VST的天花板,但它是一臺VR。瘋狂堆料讓它呈現(xiàn)了足夠明顯的特色:單眼進(jìn)3.4K分辨率的Micro OLED屏幕,高像質(zhì)的透鏡,前所未有的弧形ID結(jié)構(gòu)設(shè)計(搭配弧面玻璃、主板、電池等);多達(dá)12顆攝像頭、5顆傳感器、6顆麥克風(fēng)的組合;以及重磅的眼球+手勢+語音組合交互模式。相關(guān)閱讀:《VST的天花板?蘋果Vision Pro解析》。
AR|Vision Pro用AI檢測用戶狀態(tài)
參與Vision Pro的前蘋果AR工程師Sterling Crispin,發(fā)文分享了自己在蘋果期間所做的工作。其中提到,蘋果Vision Pro融合了大量機(jī)器學(xué)習(xí)技術(shù),包括用AI模型預(yù)測你的身體、大腦狀態(tài),比如是否對當(dāng)前事務(wù)好奇,是否走神,注意力是否被分散等等。相關(guān)閱讀:《蘋果Vision Pro結(jié)合大量AI技術(shù)用于用戶狀態(tài)檢測》。
AR|蘋果Vision Pro屏幕細(xì)節(jié)曝光

在WWDC 2023課程中提到:Vision Pro頭顯刷新率為90Hz-96Hz之間,最高可播放4K分辨率2D視頻,顯示屏原生刷新率為90Hz,如果播放24fps的視頻,則可自動使用特殊的96Hz模式。此外,Vision Pro支持SDR和HDR顯示,可渲染豐富的色彩。
AR|Vision Pro處方鏡或3-600美元
彭博社記者M(jìn)ark Gurman表示,Vision Pro上一副蔡司處方鏡片售價可能至少300-600美元,如果蘋果不提供相應(yīng)補(bǔ)貼,近視眼用戶購買Vision Pro頭顯的成本可高達(dá)4000美元左右。
AR|蘋果提出MV-HEVC 3D視頻格式

蘋果引入了一個HEVC擴(kuò)展格式:MV-HEVC,指的是多視圖HEVC,每一幀圖像攜帶左右眼兩個畫面,也就是專門為3D視頻推出的格式。
AR|行業(yè)高管點評Vision Pro
青亭網(wǎng)邀請了AR/VR行業(yè)的高管和學(xué)者,為我們點評Apple Vision Pro這款新品,以及visionOS和空間計算的前景和影響,讓我們一起來聽聽他們的看法和分析。相關(guān)閱讀:《點評|AR/VR行業(yè)高管眼中的Vision Pro》。
AR|扎克伯格評Vision Pro
在近期的一次Meta內(nèi)部大會中,扎克伯格對蘋果Vision Pro進(jìn)行了點評。詳情閱讀:《扎克伯格評Vision Pro:兩家公司愿景和價值觀不同》
AR|Kopin單色MicroLED模組

微顯示方案Kopin公布1英寸MicroLED模組,目前還在生產(chǎn)驗證階段,特點是單色,分辨率2048x2048,亮度超280萬尼特,后續(xù)預(yù)計提升至320-350萬尼特之間。據(jù)悉,初始版本基于Kopin自研的背板和驅(qū)動技術(shù),專為國防、AR場景設(shè)計。
AR|visionOS基礎(chǔ)架構(gòu)

visionOS主要基于SwiftUI、RealityKit、ARKit幾大框架,開發(fā)工具則包括Xcode、Reality Composer Pro和Unity。其中大部分是此前就推出的,值得注意的是Reality Composer Pro是一個新的工具,特點是開發(fā)者提供了一個預(yù)覽和準(zhǔn)備3D內(nèi)容的工作流。相關(guān)閱讀:《從visionOS系統(tǒng)窺探Vision Pro頭顯》
AR|visionOS用戶界面

visionOS共有三大類界面:窗口視圖、體積視圖(立體)、Space視圖(共兩種,一種是不透明背景模式Full Space,另一種則是VST透視背景Shared Space)。
Space視圖下,支持通過旋轉(zhuǎn)數(shù)碼旋鈕,用戶可以調(diào)整背景透視的程度,讓UI在完全沉浸和完全透視之間自然過渡。
AR|visionOS窗口視圖共享

visionOS可以像在macOS那樣,允許用戶共享任何窗口,此時visionOS會同步用戶的方向,以及AR比例、動畫和上下文信息,允許SharePlay繪畫中每個人獲得相同的體驗,從而實現(xiàn)遠(yuǎn)程可視化協(xié)作。
AR|visionOS支持iOS應(yīng)用

蘋果表示,蘋果Vision Pro(visionOS)將同時支持iOS和iPadOS兩大平臺的應(yīng)用。細(xì)節(jié)方面,iOS應(yīng)用為豎屏顯示,iPad應(yīng)用支持橫屏/豎屏兩種模式,開發(fā)者設(shè)置默認(rèn)模式;支持窗口縮放;安全管理Touch ID或Face ID自動改為Optic ID;支持自定義手勢識別功能。
AR|visionOS輸入方式曝光

蘋果在WWDC課程中詳細(xì)解釋了Vision Pro所支持的各種輸入方式,比如可使用手勢+虛擬鍵盤、匹配藍(lán)牙鍵盤兩種方式輸入文字等等。相關(guān)閱讀:《蘋果visionOS輸入方式曝光:眼球注視+手勢鍵盤精準(zhǔn)度超高》
AR|visionOS開發(fā)者支持服務(wù)

在蘋果visionOS官方頁面中“Work with Apple”的板塊,蘋果提到了將舉行一系列活動,并為開發(fā)者提供三種渠道和方式測試visionOS應(yīng)用以及其它服務(wù),具體于7月份上線。
AR|visionOS SDK月底上線
蘋果宣布,將于本月底之前推出visionOS SDK,并推送新版本Reality Composer和Xcode工具。
AR|Object Capture支持iOS端

WWDC 2023課程中,蘋果表示此前僅在Mac上提供的攝影測量功能Object Capture功能,現(xiàn)在支持iOS端,意味著更多第三方App可以直接實現(xiàn)USDZ格式的3D掃描建模。目前,該應(yīng)用主要支持具備LiDAR傳感器的iOS設(shè)備。
AR|ARKit-World Tracking

雖然沒有明確說是ARKit7,但ARKit也有幾點新功能:世界追蹤(World Tracking),開發(fā)者添加WorldAnchor錨點,任何錨點都會在系統(tǒng)后臺自動保存,每次設(shè)備重啟后依然會顯示在固定的位置。
AR|ARKit-Scene Understanding

包含了一系列識別周圍環(huán)境的功能,比如:平面檢測(垂直和水平)、場景幾何、圖像追蹤。識別到的表面可用來固定AR內(nèi)容,或是優(yōu)化物理模擬,允許AR與地板、墻壁產(chǎn)生自然交互。
AR|ARKit-Particles
Particles新工具,該工具可快速構(gòu)建云、雨、火花等動態(tài)粒子特效,并支持在Reality Composer Pro中預(yù)覽。
AR|RoomPlan更新

RoomPlan是ARKit 6帶來的一項功能,本屆WWDC更新功能如下:自定義AR會話、支持多房間(MultiRoom API)、可識別物體增多(如傾斜、彎曲的墻壁,或洗碗機(jī)、烤箱、水槽等元素。)
AR|Vision框架支持檢測動物

Vision框架將新增Animal Body Pose API,特點是追蹤貓、狗等動物的多個骨骼節(jié)點,以實現(xiàn)全身姿態(tài)追蹤。據(jù)悉,該API僅支持iOS 17、iPadOS 17、tvOS 17和macOS Sonoma系統(tǒng)。
AR|蘋果3D顯示UI專利

WIPO公布了一項來自蘋果3D UI系統(tǒng),特點是可識別場景中的墻壁、桌面等元素,并將交互式UI固定在這些物理元素上,仿佛可以將普通的房間布置成無限大的3D畫布。
AR|蘋果Face ID綁定視力信息

USPTO公布了一項蘋果基于面部識別的AR眼鏡認(rèn)證系統(tǒng),特點是將用戶ID與屈光度等視力信息綁定,當(dāng)用手機(jī)Face ID相機(jī)識別到特定用戶后,便會將視力信息與AR眼鏡同步。
AR|蘋果眼球手勢結(jié)合交互專利
WIPO公布蘋果一項與AR/VR頭顯相關(guān)專利,描述了一種融合眼球追蹤、手勢追蹤的GUI自然交互方式,特點是使用深度映射來追蹤手勢,通過注視點來智能識別用戶想要操控的虛擬元素,讓AR/VR中的交互更流暢,降低使用阻力。和發(fā)布的Vision Pro交互邏輯非常相似。
AR|亞馬遜引入3D模型工具Hexa
3D AR可視化平臺Hexa宣布與亞馬遜成像團(tuán)隊、AWS的空間計算團(tuán)隊聯(lián)手,推出可規(guī)模分發(fā)、簡易的3D AR開發(fā)流程,加速電商合作伙伴使用AR來營銷、展示的過程。
VR|Meta將展示視網(wǎng)膜可變焦VR

Reality Labs兩款變焦顯示VR原型(Half Dome、Butterscotch)背后負(fù)責(zé)人Yang Zhao和Douglas Lanman都將參與今年8月的SIGGRAPH 2023,期間Meta計劃展示一款具備視網(wǎng)膜級分辨率的可變焦VR頭顯原型。
VR|Quest推手勢虛擬鍵盤
Meta本周推出了基于Quest的虛擬鍵盤功能,特點是允許用戶通過手勢直接在虛擬鍵盤中打字。這項功能將整合至Presence平臺、Unity Integration SDK,允許開發(fā)者將基于手勢的虛擬鍵盤引入自己的AR/VR應(yīng)用中。
VR|惠牛發(fā)布兩款Pancake新品
AR/VR光學(xué)模組供應(yīng)商惠??萍及l(fā)布兩款Pancake新模組:Si-PK95和PK100。Si-PK95采用1.3inch Si-OLED屏、單眼4K*4K分辨率;PK100采用2.48/2.56inch LCD屏,支持1920*1800/2160*2160的單眼分辨率,該模組在實現(xiàn)大視場角的同時,比市場已有的同類產(chǎn)品更薄,模組厚度僅26mm。
VR|億境XR亮相AWE 2023
億境EmdoorVR主導(dǎo)或參與研發(fā)的三款產(chǎn)品展出于AWE 2023高通展臺:億境自研 6DoF MR一體機(jī)、Rokid分體式AR眼鏡+計算單元、教育客戶ClassVR 3DoF MR一體機(jī)。MR新品A863使用最新一代高通驍龍XR2+平臺,搭載高通最新LA1.2基線、支持OpenXR標(biāo)準(zhǔn)、具備頭6DoF手6DoF、手勢識別、眼球追蹤、VST(采用雙1600M彩色攝像頭)、IPD無極調(diào)節(jié);2160*2160雙屏高清分辨率,超大105°FOV。
VR|瑞聲科技量產(chǎn)3P Pancake
瑞聲科技宣布3P VR Pancake光機(jī)模組成功量產(chǎn),宣稱更有效抑制鬼影、近視友好、邊緣像質(zhì)清晰。
VR|AVATAR VR手術(shù)獲FDA認(rèn)證
外科手術(shù)VR醫(yī)療成像方案商AVATAR MEDICAL宣布,旗下VR術(shù)前規(guī)劃方案已獲得FDA 510(k)許可認(rèn)證,預(yù)計明年還將獲得歐洲醫(yī)療器械認(rèn)證。
VR|Unity空間應(yīng)用開發(fā)套件
蘋果Vision Pro頭顯在WWDC 2023上剛發(fā)布,同時Unity也宣布與蘋果合作,為該頭顯操作系統(tǒng)visionOS推出空間體驗開發(fā)套件:Spatial Creation。據(jù)悉,該工具目前已開啟測試預(yù)約。
VR|ILMxLAB更名ILM Immersive
作為工業(yè)光魔(ILM)整體品牌計劃的一部分,ILM旗下工作室ILMxLAB宣布將重塑品牌,更名為ILM Immersive。據(jù)悉,該工作室成立于2015年,多年來專注開發(fā)VR、MR等基于IP的
VR|Disney Plus+蘋果首發(fā)陣容
迪士尼在WWDC 2023上宣布,將在蘋果AR/VR頭顯Vision Pro中引入Disney Plus+服務(wù),并推出沉浸式體育、電影內(nèi)容。據(jù)悉,Disney Plus+將作為Vision Pro頭顯的首發(fā)陣容。
VR|4款Vision Pro應(yīng)用公開
蘋果官方公布了AR/VR平臺visionOS已有第三方開發(fā)者,包括:Algoriddim、Ryan McLeod、JigSpace、XRHealth等等。據(jù)悉,這些開發(fā)者所開發(fā)的AR/VR應(yīng)用涉及多種類型,比如交互式音樂、益智游戲、醫(yī)療方案、手勢應(yīng)用等。
VR|Virtual Desktop更新1.27版
在1.27.0測試版本中,《Virtual Desktop》帶來以下關(guān)鍵優(yōu)化:添加HEVC 10bit編解碼器,添加H.264+編解碼器選項,支持高達(dá)400Mbps;改進(jìn)注視點編碼;PC桌面串流比特率提升至100Mbps;Quest端切換為OpenXR標(biāo)準(zhǔn),支持VST透視環(huán)境;Quest Pro端支持局部調(diào)光;支持PS5 DualSense手柄。
收購|蘋果收購AR頭顯廠商Mira
蘋果已收購AR眼鏡廠商Mira,交易規(guī)模未公開。該消息是由Mira CEO在私人Instagram曝光,時間點選擇在蘋果Vision Pro發(fā)布一天后,據(jù)悉有11名Mira員工加入蘋果。
收購|Vection收購VR方案商Invrsion
AR/VR解決方案公司Vection收購VR智能零售方案商Invrsion,旨在加速時尚、零售領(lǐng)域的XR解決方案和市場機(jī)會。
融資|JBD完成B輪融資
近日,JBD關(guān)聯(lián)公司上海顯耀顯示科技有限公司發(fā)生工商變更,股東新增浙江阿里巴巴云計算有限公司等,同時公司注冊資本從約5197萬人民幣增至約5374萬人民幣。
融資|VITURE獲近千萬美金A+輪融資
近日消費級XR眼鏡品牌VITURE完成近千萬美金A+輪融資,由藍(lán)馳創(chuàng)投獨家投資。
融資|InstaVR完成10億日元融資

VR企業(yè)培訓(xùn)平臺InstaVR,近期已經(jīng)完成10億日元融資,新一輪資金將用于“InstaVR Enterprise”解決方案,目標(biāo)是解決日本國內(nèi)勞動力短缺問題。
融資|日本BiPSEE獲新融資

日本心理治療VR方案商BiPSEE獲得新一輪融資,本輪融資來自Beyond Next Ventures、ANRI、Scrum Ventures和Ocean Lease,資金將用于加速研發(fā)抑郁癥VR數(shù)字療法。