蘋果專利提出AR、VR的應用場景自由切換
查看引用/信息源請點擊:映維網(wǎng)
從純數(shù)字環(huán)境現(xiàn)實轉(zhuǎn)換到半數(shù)字現(xiàn)實環(huán)境,再到純物理環(huán)境
(映維網(wǎng)?2021年11月17日)同時支持AR+VR的設(shè)備正在成為一種趨勢,而早前有消息稱蘋果同樣在研發(fā)一種同時支持所述兩種功能的頭戴式設(shè)備。 在名為“Transitioning between imagery and sounds of a virtual environment and a real environment”的專利申請中,蘋果就描述了一種從純數(shù)字環(huán)境現(xiàn)實轉(zhuǎn)換到半數(shù)字現(xiàn)實環(huán)境,再到純物理環(huán)境或反之亦然的技術(shù)和系統(tǒng)。
根據(jù)一個實施例,專利描述的方法包括:提供第一類型的第一環(huán)境的視圖;提供與第一環(huán)境相關(guān)聯(lián)的第一環(huán)境音頻;檢測現(xiàn)實轉(zhuǎn)換事件;響應于檢測現(xiàn)實轉(zhuǎn)換事件:提供第一環(huán)境的組合視圖和第二類型的第二環(huán)境,組合視圖包括第一可見性值的第一環(huán)境的圖像和第二可見性值的第二環(huán)境的圖像;以及提供所述第一環(huán)境音頻和與所述第二環(huán)境相關(guān)聯(lián)的第二環(huán)境音頻的組合,其中所述第一環(huán)境音頻或所述第二環(huán)境音頻中的至少一個包括多個音頻對象,所述多個音頻對象的音量水平與所述第一可見性值或所述第二可見性值中的至少一個相關(guān)聯(lián)。
在一個實施例中,第一類型的第一環(huán)境是虛擬環(huán)境,第二類型的第二環(huán)境是真實環(huán)境表示。在一個實施例中,第一類型的第一環(huán)境是真實環(huán)境的表示,第二類型的第二環(huán)境是虛擬環(huán)境。 在一個實施例中,組合視圖包括將第一環(huán)境的圖像與第二環(huán)境的圖像合成。在一個實施例中,視圖合成使用與第一環(huán)境和第二環(huán)境相關(guān)聯(lián)的alpha通道。在一個實施例中,組合視圖包括將第一環(huán)境的用戶透視圖與第二環(huán)境的用戶透視圖對齊。
在一個實施例中,第一環(huán)境音頻包括多個音頻對象,其中組合混音包括根據(jù)多個音頻對象的各自音量水平將多個音頻對象與第二環(huán)境音頻交叉淡入。在一個實施例中,多個音頻對象中的一個或多個第一音頻對象的音量水平進一步與第一音頻環(huán)境中的一個或多個第一音頻對象的突出度相關(guān)聯(lián)。
在一個實施例中,所述方法同時包括,檢測第二現(xiàn)實轉(zhuǎn)換事件;響應于檢測到第二轉(zhuǎn)換事件:停止提供第一環(huán)境與第二環(huán)境的組合視圖,以及第一環(huán)境音頻與第二環(huán)境音頻的組合混音;提供第二環(huán)境的視圖,以及提供第二環(huán)境音頻。
在一個實施例中,所述方法包括,檢測第二轉(zhuǎn)換事件;響應于檢測到第二轉(zhuǎn)換事件:修改第一和第二可見性值;以及修改第一環(huán)境音頻與第二環(huán)境音頻的組合混音。
在一個實施例中,所述方法包括檢測第二轉(zhuǎn)換事件;響應于檢測到第二轉(zhuǎn)換事件:停止提供第一環(huán)境與第二環(huán)境的組合視圖,以及第一環(huán)境音頻與第二環(huán)境音頻的組合混音;提供第一環(huán)境的視圖;以及提供第一環(huán)境音頻。
在下面的系列專利示意圖中,系統(tǒng)可以根據(jù)需要在VR環(huán)境,AR環(huán)境或純物理環(huán)境中過渡轉(zhuǎn)換,并且相應地調(diào)整真實聲源或虛擬聲源,以匹配目標轉(zhuǎn)換情景。
專利圖2是一個包含物理對象的真實環(huán)境圖例,其中所述真實環(huán)境是一個包含墻壁202-c,電腦桌202-a和電腦202-b的房間200。
專利圖3則是位于房間200的VR頭顯用戶所看到的完整虛擬視圖。根據(jù)需要,系統(tǒng)可以逐漸過渡至成AR環(huán)境或純物理環(huán)境,依次顯示下面的順序視圖,并且相應地調(diào)整聲音,以實現(xiàn)最為匹配的聲畫體驗。





值得一提的是,這樣的系統(tǒng)同時可以作為蘋果頭顯的防護系統(tǒng)。
例如,在一個簡單的例子中,當運行VR環(huán)境時,隨著用戶越來越接近物理對象,視圖可以逐漸過渡至半數(shù)字環(huán)境或純物理環(huán)境。這時,物理對象的的不透明度將越來越高,亦即越發(fā)醒目。當用戶達到即將與物理對象發(fā)生碰撞的危險位置時,不再呈現(xiàn)虛擬視圖,而是呈現(xiàn)基于攝像頭的完整真實世界影像。
根據(jù)一個實施例,頭顯系統(tǒng)通過一個或多個顯示器呈現(xiàn)虛擬環(huán)境;頭顯系統(tǒng)檢測頭顯設(shè)備與物理對象的接近度。
在一個實施例中,響應于檢測到頭顯設(shè)備到物理對象的接近度小于第一閾值距離,將所述物理對象的圖像從真實環(huán)境圖像中分割出來。然后,在與物理對象位置相對應的虛擬視圖位置插入物理對象的分割圖像。同時,以與物理對象與頭顯設(shè)備的接近度相關(guān)聯(lián)的第一可見性值呈現(xiàn)包含物理對象分割圖像的虛擬環(huán)境。
在一個實施例中,響應于檢測到頭顯設(shè)備到物理對象的接近度小于第二閾值距離,修改物理對象的圖像的第一可見性值,并以第二可見性值呈現(xiàn)包含物理對象分割圖像的虛擬環(huán)境。
在一個實施例中,響應于檢測到頭顯設(shè)備到物理對象的接近度小于第三閾值距離,停止呈現(xiàn)虛擬環(huán)境,并提供真實環(huán)境的完整視圖。 在另一個實施例中,響應于檢測到頭顯設(shè)備與物理對象的接近度大于第一閾值距離,不呈現(xiàn)包含物理對象的插入圖像的虛擬環(huán)境。
相關(guān)專利:Apple Patent | Transitioning between imagery and sounds of a virtual environment and a real environment
名為“Transitioning between imagery and sounds of a virtual environment and a real environment”的蘋果專利最初在2019年9月提交,并在日前由美國專利商標局公布。
---
原文鏈接:https://news.nweon.com/91637