查看引用/信息源請(qǐng)點(diǎn)擊：映維網(wǎng)Nweon

蘋果正在加大對(duì)CVML人才的招攬力度

（映維網(wǎng)Nweon?2022年12月12日）對(duì)于AR/VR一體機(jī)，從裸手交互到全身動(dòng)捕，計(jì)算視覺+機(jī)器學(xué)習(xí)（CV+ML是相關(guān)解決方案的重要支柱?，F(xiàn)根據(jù)映維網(wǎng)的科技大廠招聘信息搜索，有望在2023年發(fā)布首款A(yù)R/VR設(shè)備的蘋果正在加大對(duì)這方面人才的招攬力度。

蘋果位于加拿大魁北克和美國庫比蒂諾等地方的團(tuán)隊(duì)一直有在穩(wěn)定地招攬AR/VR方向的CVML人才。現(xiàn)在，映維網(wǎng)發(fā)現(xiàn)蘋果慕尼黑團(tuán)隊(duì)同樣開始招攬這方面的人才。

德國慕尼黑是蘋果在歐洲的一個(gè)重要科研中心。這里的計(jì)算機(jī)視覺（CV）團(tuán)隊(duì)慕尼黑視覺實(shí)驗(yàn)室主要是探索基于深度學(xué)習(xí)的CV應(yīng)用。日前，蘋果慕尼黑視覺實(shí)驗(yàn)室發(fā)布了一份面向AR/VR的“軟件工程師”職位申請(qǐng)。

蘋果寫道：“加入我們的慕尼黑視覺實(shí)驗(yàn)室，加入我們的身體追蹤技術(shù)軟件工程團(tuán)隊(duì)。我們正在尋找一位熱情的軟件工程師來幫助我們開發(fā)AR/VR實(shí)時(shí)動(dòng)捕算法的框架，而這將改變?nèi)藗兊慕涣鞣绞?。作為我們團(tuán)隊(duì)中的軟件工程師，你將與計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)專家密切合作。”

這家公司進(jìn)一步在崗位描述中指出：“我們正在尋找一位富有創(chuàng)意的軟件工程師來設(shè)計(jì)、實(shí)現(xiàn)和完善隨iOS和其他蘋果操作系統(tǒng)一同發(fā)布的框架。你將會(huì)接觸到涉及圖像處理、實(shí)時(shí)計(jì)算機(jī)視覺、機(jī)器學(xué)習(xí)算法和增強(qiáng)現(xiàn)實(shí)的算法管道?！?/p>

綜合蘋果招聘官方頁面和LinkedIn等招聘網(wǎng)站，以及映維網(wǎng)的科技大廠招聘跟蹤，這似乎是慕尼黑團(tuán)隊(duì)首次招攬AR/VR方向的計(jì)算機(jī)視覺工程師。

有趣的是，蘋果在美國庫比蒂諾有一支名為“Body Technologies（身體技術(shù)）”的團(tuán)隊(duì)，而他們同樣有穩(wěn)定招募AR/VR方向的CVML人才，并且主要探索ARKit的Motion Capture動(dòng)捕功能。

具體來說，手持ARKit設(shè)備的用戶可以對(duì)準(zhǔn)特定人員，而Motion Capture功能可以通過攝像頭實(shí)時(shí)捕捉對(duì)方的人體運(yùn)動(dòng)。通過將身體位置和運(yùn)動(dòng)理解為一系列的關(guān)節(jié)和骨骼，這可以允許應(yīng)用程序?qū)崿F(xiàn)一系列的效果。例如，將真人的動(dòng)作映射至一個(gè)數(shù)字假人。

當(dāng)然，對(duì)于慕尼黑團(tuán)隊(duì)招募的實(shí)時(shí)動(dòng)捕算法工程師，不確定這個(gè)崗位是否同樣瞄準(zhǔn)ARKit的Motion Capture動(dòng)捕，還是說針對(duì)其他方面。

實(shí)際上，AR/VR計(jì)算機(jī)視覺+機(jī)器學(xué)習(xí)可以應(yīng)用到一系列的領(lǐng)域，比如說支持豐富表情感知的面容識(shí)別；啟用裸手交互的手勢(shì)識(shí)別；以及用于Avatar的全身動(dòng)捕等等。

說到Avatar全身動(dòng)捕，這是AR/VR行業(yè)的一個(gè)有趣課題。

盡管AR/VR一體機(jī)的內(nèi)向外追蹤的性能已經(jīng)足以在頭顯、控制器和雙手追蹤方面取代外向內(nèi)追蹤，但由于視場(chǎng)覆蓋問題，AR/VR一體機(jī)的傳感器難以感知下半身動(dòng)作，所以全身動(dòng)捕一直以來都是依靠外向內(nèi)的追蹤設(shè)置來實(shí)現(xiàn)。隨著頭顯設(shè)備的進(jìn)一步輕薄化（進(jìn)一步影響傳感器視場(chǎng)），這一挑戰(zhàn)越發(fā)困難。

延伸閱讀：Quest?Movement SDK通過IK反向運(yùn)動(dòng)學(xué)為Avatar提供全身效果
延伸閱讀：卡內(nèi)基·梅隆大學(xué)探索基于控制器的內(nèi)向外追蹤全身動(dòng)捕解決方案

然而，行業(yè)正在嘗試各種解決方案，例如采用機(jī)器學(xué)習(xí)和IK反向運(yùn)動(dòng)學(xué)等技術(shù)來推斷補(bǔ)全下半身，以及利用控制器/機(jī)械手套的內(nèi)向外追蹤來覆蓋下半身動(dòng)作。當(dāng)然，相關(guān)方案的性能效果并不完美。

考慮到Avatar全身動(dòng)捕是AR/VR行業(yè)難以繞開的一座大山，隨著蘋果有望在2023正式進(jìn)軍AR/VR市場(chǎng)，疊加他們?cè)谟?jì)算機(jī)視覺和機(jī)器學(xué)習(xí)方面擁有巨大的人才和知識(shí)儲(chǔ)備，不排除蘋果同樣在探索純AR/VR一體機(jī)的全身動(dòng)捕解決方案，并正在組建相關(guān)的團(tuán)隊(duì)。

---
原文鏈接：https://news.nweon.com/103334