Meta Quest 3獲得了兩項(xiàng)全新手部追蹤功能:多模式(Multimodal)和寬運(yùn)動(dòng)模式(Wide Motion Mode)。
最新版本Meta XR Core SDK (v62)引入了兩種手部追蹤功能,開發(fā)者現(xiàn)在可在Quest Store 和App Lab應(yīng)用中實(shí)現(xiàn):多模式和寬運(yùn)動(dòng)模式。

多模式支持隨附Touch Pro手柄的Quest 2、Quest Pro和Quest 3,而寬運(yùn)動(dòng)模式僅支持Quest 3。值得一提的是,這兩種模式并不互相兼容。
多模式支持同時(shí)追蹤手部和手柄。之前,頭顯可以追蹤手柄或手部,但不能同時(shí)追蹤兩者。在多模式狀態(tài)下,這些追蹤模式之間的自動(dòng)切換被禁用,通過雙擊手柄切換到手動(dòng)追蹤的功能也被禁用。
多模式的諸多好處:
用戶可以一只手使用手柄,另一只手進(jìn)行手部跟蹤,從而實(shí)現(xiàn)兩全其美控制:手柄提供精確度和觸覺反饋,手部跟蹤提供沉浸感;
現(xiàn)在,手柄追蹤和手部追蹤之間的切換是即時(shí)的,從而消除了從一種追蹤模式到另一種追蹤模式轉(zhuǎn)換慢或轉(zhuǎn)換失敗問題;
現(xiàn)在,用戶手部和手柄將能被同時(shí)追蹤,應(yīng)用將能顯示手柄在房間中的位置,從而使用戶更輕松在完全沉浸式應(yīng)用中查找和拿起設(shè)備。
不過,多模式有一些局限性,不兼容以下:
Quest 3上半身追蹤;
快速運(yùn)動(dòng)模式;
追蹤鍵盤以及寬運(yùn)動(dòng)模式。
寬運(yùn)動(dòng)模式
寬運(yùn)動(dòng)模式通過在后臺(tái)使用Quest 3上半身追蹤來擴(kuò)展手部跟蹤量,如果手部位于追蹤攝像頭的視野之外或被物體遮擋,則根據(jù)跟蹤的手臂來估計(jì)手部的位置。
需要寬臂運(yùn)動(dòng)(擺動(dòng)手臂、投擲物體或伸手拿虛擬背包或箭頭)的社交應(yīng)用和交互最能從 寬運(yùn)動(dòng)模式中受益。
Meta Quest Store和App Lab應(yīng)用現(xiàn)已支持手部追蹤以及Quest 3、Quest Pro手柄。
這項(xiàng)名為“Multimodal”(多模式)的功能自去年7月起就作為“實(shí)驗(yàn)性”功能出現(xiàn)于Meta XR SDK,這意味著開發(fā)者可以根據(jù)該功能或通過SideQuest等第三方途徑發(fā)布相關(guān)應(yīng)用,而基于Quest v62,該功能已可供公眾使用。
自從大約四年前推出手勢(shì)追蹤以來,開發(fā)者便可構(gòu)建支持手勢(shì)追蹤和手柄的Quest應(yīng)用,你可以隨時(shí)拿起或放下手柄以在兩種模式之間切換,但是切換模式之間存在延遲。
而基于多模式,手柄追蹤會(huì)繼續(xù)進(jìn)行,更重要的是,該模式可以實(shí)現(xiàn)手部和手柄的混合支持。例如,這將支持「GOLF+」和「Walkabout Minigolf」等單手柄游戲可追蹤玩家的另一只手。
如果開發(fā)者愿意,理論上手柄也可以連接到物體或身體部位,充當(dāng)通用追蹤器。Multimodal 僅適用于Quest 3或Touch Pro,后者隨附于Quest Pro,不適用于Quest 2手柄,這是因?yàn)?Quest 3已經(jīng)在手柄追蹤的同時(shí)不斷運(yùn)行手部跟蹤,以填補(bǔ)手柄暫時(shí)被遮擋時(shí)的空白,而Quest 2的芯片組可能無法同時(shí)高效運(yùn)行這兩項(xiàng)功能。而且,Touch Pro會(huì)進(jìn)行自我追蹤,并且沒有性能要求。
此外,值得一提的是,多模式限制了開發(fā)者使用其他一些功能,包括由內(nèi)而外的身體追蹤、手部追蹤快速運(yùn)動(dòng)模式和新的寬運(yùn)動(dòng)模式以及追蹤鍵盤。
Meta Quest Pro v56 SDK更新推出了“Multimodal”同步手部和手柄操控模式。
該模式去年10月在Connect 2022與Quest Pro Touch Pro手柄一起公布,開發(fā)者可以在其應(yīng)用程序中啟用這一功能。
基于“Multimodal”模式,可以實(shí)現(xiàn)手部和手柄瞬時(shí)轉(zhuǎn)換和混合追蹤。例如,這將支持「GOLF+」和「Walkabout Minigolf」等單手柄控制游戲追蹤玩家另一只手。
為此Meta首席技術(shù)官博斯沃思分享了一段“Multimodal”模式實(shí)際應(yīng)用GIF:

“Multimodal”模式將作為“實(shí)驗(yàn)性”選項(xiàng)啟動(dòng),這通常意味著它尚未在Quest Store或應(yīng)用實(shí)驗(yàn)室發(fā)布。目前該模式處于實(shí)驗(yàn)階段,并僅支持Quest Pro,但在完全發(fā)布后,此模式也將支持未指定的“其他設(shè)備和手柄”。
這可能包括即將推出的Meta Quest 3。博斯沃思認(rèn)為,Quest 3可持續(xù)運(yùn)行手部跟蹤,并與手柄紅外LED追蹤機(jī)制融合。
此外,Meta v56 Quest系統(tǒng)軟件更新減少了Quest 2和Quest Pro手部追蹤延遲。添加了新快速運(yùn)動(dòng)模式(FMM),Meta表示該模式改進(jìn)了對(duì)“健身和節(jié)奏應(yīng)用中常見的快速運(yùn)動(dòng)”的追蹤。
來源:UploadVR