Vision Pro:為什么空間音頻是AR的絕殺武器?
https://www.bilibili.com/video/BV16X4y1b79Y/Apple Vision Pro,不僅僅是蘋果全新的重磅品類,而且在它身上也融合了蘋果過(guò)去幾乎所有新技術(shù),比如空間音頻就是其中一個(gè)例子。
蘋果表示,Vision Pro中空間音頻可以很好的應(yīng)用在:影視節(jié)目、游戲內(nèi)容、3D空間照片、3D空間視頻、視頻通話、等,甚至整個(gè)系統(tǒng)和UI交互中也充分融合空間音頻的能力。

而蘋果如何高規(guī)格的打造Vision Pro,更是在告訴大家,空間音頻將是AR、MR設(shè)備的一大殺器,它對(duì)于提升臨場(chǎng)感至關(guān)重要。

1,蘋果最強(qiáng)空間音頻系統(tǒng)
Vision Pro和大多數(shù)AR、VR一樣,采用了開(kāi)放式揚(yáng)聲器方案,整體的設(shè)計(jì)相對(duì)中庸一些,因?yàn)檎w模組體積比較大,在頭顯硬質(zhì)綁帶上還是有點(diǎn)突出。
據(jù)悉,蘋果Vision Pro描述頁(yè)面顯示:這是蘋果有史以來(lái)最強(qiáng)的空間音頻系統(tǒng)。

?
在此之前,我體驗(yàn)到最好的空間音頻AR、VR設(shè)備包括:HoloLens 2,它不僅臨場(chǎng)感十足,而且音頻定向傳播控制極其出色,在旁邊的人幾乎聽(tīng)不到設(shè)備的聲音。
2,音頻射線追蹤
根據(jù)現(xiàn)場(chǎng)體驗(yàn)的反饋,所有人在體驗(yàn)之前都實(shí)現(xiàn)通過(guò)iPhone原生感相機(jī)掃描耳朵輪廓,從而為Vision Pro體驗(yàn)提供更適合你個(gè)人的空間音頻效果。

該技術(shù)最早是在WWDC22上公布,其目標(biāo)是AirPods Pro提供更符合你耳朵輪廓的空間音頻效果。因?yàn)锳irPods耳機(jī)的設(shè)計(jì)是在保證佩戴舒適性,同時(shí)在數(shù)千人不同耳朵輪廓的基礎(chǔ)上建立了一個(gè)通用HRTF模型,來(lái)打造出適用性較廣的空間音頻能力。
而在Vision Pro上,則更進(jìn)一步。
目前大家可以通過(guò)具備空間音頻的AirPods Pro等產(chǎn)品來(lái)了解空間音頻的能力。但是我要說(shuō)的是,在Vision Pro中的空間音頻將會(huì)更進(jìn)一步。
其中一個(gè)重要邏輯就是:它會(huì)充分融合設(shè)備中LiDAR掃描,對(duì)房間內(nèi)聲學(xué)特性(物理材質(zhì)等)進(jìn)行分析,然后打造出適用于你耳朵輪廓且匹配你房間的“空間音頻”效果。
上面這項(xiàng)技術(shù),被蘋果稱為“音頻射線追蹤”(Audio Raytracing)。當(dāng)然,在部分VR游戲中已經(jīng)支持此技術(shù),只不過(guò)對(duì)照關(guān)系都在游戲的虛擬場(chǎng)景之內(nèi)。
相比AirPods Pro的空間音頻,Vision Pro中既考慮你的耳朵輪廓信息,又融合(虛擬場(chǎng)景的)聲音在房間內(nèi)傳播特性,來(lái)達(dá)到虛實(shí)融合的目的。
3,visionOS音頻交互
在WWDC公開(kāi)課中,我們也看到了蘋果visionOS的聲音交互設(shè)計(jì)指南。從中我們了解到,更多的聲音交互層面的信息。
?
空間中還原聲音的目標(biāo)是:
1,正確的音源位置;
2,正確的音源方向。
圍繞這兩點(diǎn),再加上一些技巧基本可以很好的設(shè)計(jì)好空間音頻交互。
其中主要的要求是:
1,背景音舒適、音量合適、不刺耳、不聒噪;
2,前后景聲音分明,利用好聲音位置信息;
3,需要明確左右位置,提供明確的聲音方向;
4,背景回響,提升整體氛圍感;
5,聲音和視覺(jué)交互錨定,整體具備層次感。
參考:Apple