Meta發(fā)布Quest 2手部追蹤2.0版,帶來更穩(wěn)健遮擋、移動(dòng)交互
查看引用/信息源請點(diǎn)擊:映維網(wǎng)Nweon
涵蓋追蹤連續(xù)性、手勢支持和和性能等方面的“階躍式優(yōu)化”
(映維網(wǎng)Nweon?2022年04月20日)Meta日前就Quest?2的裸手交互功能發(fā)布了“重大更新”,為Presence Platform的手部追蹤帶來2.0版本,涵蓋追蹤連續(xù)性、手勢支持和和性能等方面的“階躍式優(yōu)化”。另外,所述迭代同時(shí)允許快速和重疊手部動(dòng)作,支持鼓掌及其他手遮手交互,從而實(shí)現(xiàn)了幾乎無窮無盡的對象操縱可能性。

為了幫助你在無控制器的虛擬現(xiàn)實(shí)中構(gòu)建自然和沉浸的裸手交互,以及為Quest 2和未來設(shè)備提供關(guān)鍵的優(yōu)化,團(tuán)隊(duì)通過全新的計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)方法重新設(shè)計(jì)了手部追蹤技術(shù)。主要包括:
1. 追蹤連續(xù)性的階躍式優(yōu)化

當(dāng)系統(tǒng)丟失手部的追蹤時(shí),體驗(yàn)會(huì)令用戶感到沮喪。所以改善所述問題成為了團(tuán)隊(duì)的首要任務(wù)。對于這一版本,Meta在手部追蹤連續(xù)性方面實(shí)現(xiàn)了階躍式優(yōu)化,從而為日常使用帶來了更好的沉浸感和一致的雙手體驗(yàn)。這意味著你可以少花時(shí)間擔(dān)心可靠性,多花時(shí)間為應(yīng)用程序?qū)崿F(xiàn)獨(dú)特的交互。
2. 穩(wěn)健的遮擋、更快的移動(dòng)和全新的手遮手交互

團(tuán)隊(duì)開發(fā)了一種應(yīng)用深度學(xué)習(xí)的全新方法。當(dāng)設(shè)備的攝像頭看不到完整的手或當(dāng)手快速移動(dòng)時(shí),系統(tǒng)將可以更好地理解手部的姿態(tài),從而支持需要強(qiáng)大追蹤和復(fù)雜手勢的應(yīng)用程序,包括:
追蹤的手遮手交互,比如鼓掌或擊掌。
當(dāng)其他手指被手掌擋住時(shí),系統(tǒng)能夠更準(zhǔn)確地表示豎起大拇指的手勢。
3. 更好的手勢識別
全新的手部追蹤技術(shù)現(xiàn)在可以持續(xù)識別你想要使用的最重要手勢。通過改進(jìn)的捏、抓和戳識別,你可以期望更少的意外丟失。另外,對于實(shí)現(xiàn)了Interaction SDK中的任何手勢的應(yīng)用程序,以及你在應(yīng)用程序中內(nèi)置的任何自定義手勢,你都能夠看到顯著的提升。無論拿起一個(gè)虛擬物品,擊打一個(gè)拳擊袋,還是演奏一種樂器,新版本都更將幫助你更接近于在虛擬現(xiàn)實(shí)中無縫復(fù)刻自然的手部動(dòng)作。

上面的視頻演示了用于握持虛擬對象的“抓”手勢識別。你可以看到1.0版本和2.0版本之間的變化。
Meta表示,這一裸手交互的2.0更新將從今天開始鋪開。如果開發(fā)者已經(jīng)在應(yīng)用程序中內(nèi)置了手部追蹤功能,你不需要改動(dòng)任何API調(diào)用。但當(dāng)然,它不會(huì)自動(dòng)啟用。對于Native,你可以在Android Manifest文件中添加以下element來選擇加入:。至于Unity和Unreal,你可以參考屆時(shí)提供的文檔說明。
在同一篇博文中,Meta展示了四款應(yīng)用通過手部追蹤2.0版提升性能的示例:
《Cubism》的開發(fā)者表示:“這一手部追蹤更新是裸手追蹤質(zhì)量的一大進(jìn)步,現(xiàn)在用雙手暢玩《Cubism》感覺更加穩(wěn)定和一致。以前,《Cubism》的手部追蹤依賴于平滑手部數(shù)據(jù)輸入來產(chǎn)生穩(wěn)定的輸入方法。另外,你需要向玩家強(qiáng)調(diào)不要交叉手部,因?yàn)檫@會(huì)對追蹤產(chǎn)生負(fù)面影響?,F(xiàn)在,新版本已經(jīng)改善了所有這一切,其一致性足以讓我在默認(rèn)情況下關(guān)閉手部平滑功能?!?/p>
《Unplugged: Air Guitar》的開發(fā)者指出:“對我們來說,這一手部追蹤更新是一件非常重要的事情?!禪nplugged: Air Guitar》大量使用手部追蹤來實(shí)現(xiàn)真實(shí)的吉他游戲感,并且它涉及許多快速的手部動(dòng)作和快速的和弦變化。從一開始,我們就想讓玩家感覺他們在玩真正的吉他。對于舊版本的手部追蹤,盡管我們成功地實(shí)現(xiàn)了非??煽亢蜏?zhǔn)確的游戲,但我們不得不為游戲設(shè)置一定的限制,從而提供一種順暢的體驗(yàn)。對于最新的版本,手部追蹤非常準(zhǔn)確,反應(yīng)迅速,我們可以包括所有以前無法實(shí)現(xiàn)的額外功能:快速改變手指位置,增加更真實(shí)的和弦數(shù)量等等?!?/p>
《Hand Physics Lab》的開發(fā)者表示:“這一手部追蹤的更新是用手進(jìn)行自然和直觀交互的一大進(jìn)步。在構(gòu)建手部優(yōu)先應(yīng)用程序時(shí),最大的挑戰(zhàn)之一是系統(tǒng)提供的手部追蹤的可靠性和準(zhǔn)確性?!禜and Physics Lab》旨在強(qiáng)調(diào)當(dāng)時(shí)可能發(fā)生的事情,并邀請用戶挑戰(zhàn)技術(shù)的局限性。對于這一重大改進(jìn),我們希望更多的人能夠發(fā)現(xiàn)手部追蹤可以為沉浸式體驗(yàn)提供了什么?!?/p>
《Liteboxer》的開發(fā)者則評論道:“這一手部追蹤更新無疑提高了我們?yōu)椤禠iteboxer》用戶提供完美訓(xùn)練體驗(yàn)的能力。我們的訓(xùn)練需要大量的快速出拳,手部追蹤必須跟上嚴(yán)格的節(jié)奏。我們對最新的更新感到非常滿意,并對手部追蹤在Quest平臺的總體發(fā)展方向感到興奮?!?/p>
值得一提的是,團(tuán)隊(duì)表示Presence Platform未來將增加更多的功能與優(yōu)化,從而幫助開發(fā)者創(chuàng)造一個(gè)真正的互聯(lián)互通世界。
---
原文鏈接:https://news.nweon.com/96321