Meta首席技術官博斯沃思暗示,舌頭追蹤不會很快成為Meta Quest的標準功能,但基于AI可輔助實現(xiàn)。
博斯沃思最近在Instagram AMA被問及Meta Quest舌頭追蹤支持時,表示:
“如果沒有一個指向嘴部的攝像頭,舌頭追蹤是很困難的,而我們現(xiàn)階段沒有這樣的攝像頭。但是,該攝像頭真的沒有非常適合頭顯。通過添加某種外部適配器以實現(xiàn)?也許。這種攝像頭將相當激進,而且我不確定,是否會增進銷售?!?/p>
“我并不是說舌頭追蹤不是一個引人注目的功能,很多問題是:我們能否根據(jù)聽到的聲音更好預估舌頭位置?。如果你伸出舌頭,我們能看到虛擬化身的舌頭反饋動作嗎?從Quest頭顯攝像頭目前所在的位置來看,也許這是可行的?!?/p>
根據(jù)博斯沃思的表述,先進的舌頭追蹤功能將不會很快現(xiàn)身Meta Quest。然而,博斯沃思表示,有一天可能基于人工智能和現(xiàn)有的追蹤攝像頭實現(xiàn)(基本的)舌頭追蹤。事實上,Quest Pro已經做到了。
擁有面部追蹤功能的Quest Pro最近獲得了基于內置紅外攝像頭進行舌頭追蹤的軟件支持。然而,Quest Pro只能檢測舌頭伸出的距離,并且支持舌頭追蹤的應用也很少,Steam Link 「VRChat」就是一個例子。
因此,除非Meta發(fā)布一款使舌頭追蹤變得更容易的頭顯,否則Quest開發(fā)者不會盡力采用該追蹤功能。
不過,HTC Vive基于模塊實現(xiàn)了舌頭追蹤功能。HTC Vive Pro推出了面部追蹤器插件,隨后Vive Focus 3推出了另一個模塊。為此科技博主Brad Lynch基于虛擬化身展示了較舊的、現(xiàn)已似乎已停產的Vive Pro附加組件,并將其與Quest Pro基本舌頭追蹤功能進行了比較。
Meta Quest Pro面部追蹤現(xiàn)在包括了舌部動作。
在去年對Quest Pro的測試中,我們指出,當用戶在虛擬鏡子中看到自己的面部表情時,伸出舌頭則會打破這種錯覺,而缺少舌部動作顯然也會限制社交VR表現(xiàn)力。
在適用于Unity和本機代碼的SDK v60版本中,Meta發(fā)布了新版本面部跟蹤OpenXR擴展,其中包括了伸舌距離。
Meta Avatars SDK尚未更新以支持此功能,但第三方頭像解決方案在將SDK版本更新到v60后可支持此功能。

ALVR開發(fā)者korejan更新了ALXR VRFCT(VRCFaceTracking)模塊,ALXR是用于PC VR流媒體Virtual Desktop/Steam Link/Quest Link的開源替代品,以支持VRChat虛擬化身舌頭追蹤。
Steam Link和Virtual Desktop均支持Quest Pro面部跟蹤,并可將化身動作傳遞到VRChat,但這兩款應用用戶都需要更新至v60 SDK以嘗試舌頭追蹤。
Quest Pro面部追蹤功能在Quest Store上幾乎沒有任何第三方采用。Meta Horizon套件完全支持面部追蹤,但VRChat僅支持眼動追蹤,而Rec Room和Bigscreen仍然不支持面部或眼動追蹤。
據(jù)報道,這可能是因為Quest Pro的銷量不太理想,而導致第三方采用不一。Quest Pro在推出僅四個月后就將價格從1500美元下調至1000美元,并且近幾個月一直免費贈送。不過,Quest Pro仍繼續(xù)獲得軟件支持,最近更實現(xiàn)了混合現(xiàn)實性能提升,如今,又新增了舌頭追蹤功能。