Meta首席執(zhí)行官扎克伯格表示，Meta一直在開發(fā)的手指追蹤神經(jīng)腕帶將“在未來幾年內(nèi)”上市。
扎克伯格上周五在《Morning Brew Daily》脫口秀節(jié)目表態(tài)，“我們實際上已經(jīng)接近在未來幾年內(nèi)將神經(jīng)腕帶應(yīng)用到產(chǎn)品中”。
2019年底，F(xiàn)acebook收購了一家名為CTRL Labs的初創(chuàng)公司，該公司至少從2015年起就一直在研究手指追蹤腕帶，盡管2019年初的一份專利申請表明Facebook內(nèi)部也在研究這一技術(shù)。自收購以來，CTRL Labs首席執(zhí)行官兼聯(lián)合創(chuàng)始人Thomas Reardon就一直在Meta內(nèi)領(lǐng)導(dǎo)該項目。
雖然Meta Quest和Apple Vision Pro等頭顯已經(jīng)能夠基于計算機視覺以光學(xué)方式追蹤用戶手指，但這種方法的準(zhǔn)確性有限且延遲相對較高，且還容易出現(xiàn)遮擋問題，并且在較暗的環(huán)境下表現(xiàn)較差。
而手指追蹤的另一種完全不同的方法是采用肌電圖（EMG）技術(shù)讀取從大腦通過手腕傳遞到手指的神經(jīng)電信號。理論上，這將能實現(xiàn)零延遲甚至負(fù)延遲、完美的精度、無論光照條件如何都可以運行，并且不會受到遮擋；在2021年討論這項技術(shù)時，Reardon聲稱一項新突破可解碼單個神經(jīng)元的活動，從而“對機器進(jìn)行幾乎無限的控制”。
這種高質(zhì)量和可靠性無遮擋手指追蹤可通過手部極其微妙的動作來精確控制復(fù)雜的界面，使其成為頭顯和AR眼鏡的理想輸入方法。
而就在扎克伯格發(fā)表這份聲明的幾周前，蘋果推出了Apple Vision Pro，該產(chǎn)品結(jié)合了眼動追蹤和光學(xué)手指追蹤技術(shù)，實現(xiàn)了“凝視和捏合”，這是一種快速直觀的選擇方法，可以將手放在膝蓋上執(zhí)行“單擊”，但比單擊更復(fù)雜的交互（例如滾動和調(diào)整大?。┤匀恍枰鄬×业氖植縿幼鳎⑶矣脩羰植勘仨氃陬^顯視野范圍內(nèi)。
Meta可能希望神經(jīng)腕帶能在任何情況下實現(xiàn)輕松的精確操作，這有點類似于計鼠標(biāo)，但具有額外的維度。事實上，Meta之前聲稱，到2028年左右，神經(jīng)腕帶甚至可以精確到足以模擬鍵盤。
那么神經(jīng)腕帶將如何出現(xiàn)在Meta產(chǎn)品中呢？
2023年初，一份內(nèi)部Meta AR/VR硬件路線圖泄露給了The Verge，其中透露了有關(guān)Quest 3的詳細(xì)信息、目前傳聞稱之的Quest 3 Lite，以及取消Quest Pro 2 ，轉(zhuǎn)而采用更具雄心的型號。同時，這份路線圖還提到，Meta計劃在2025年將神經(jīng)腕帶與第三代雷朋智能眼鏡捆綁發(fā)布。
根據(jù)該路線圖，兩種型號的神經(jīng)腕帶將以不同的價格提供——一種僅配備神經(jīng)輸入技術(shù)；另一種配備顯示屏和攝像頭，可充當(dāng)智能手表。第二代神經(jīng)腕帶腕帶顯然也將充當(dāng)Meta計劃于2027年推出的真正AR眼鏡的輸入設(shè)備。不過，我們注意到，這一計劃或時間表可能在一年內(nèi)發(fā)生了變化。
此外，蘋果也有可能在其手表產(chǎn)品線的未來版本中采用這項技術(shù)，盡管到目前為止還沒有關(guān)于蘋果在手腕肌電圖方面開展工作的報道。
一段視頻演示了PSVR 2的精準(zhǔn)手指追蹤功能，索尼還為此申請了一項將游戲時刻生成游戲NFT的專利。
PSVR 2將于2023年2月23日發(fā)布，如今，在Twitter上，一名用戶發(fā)布了一段智能手機視頻，視頻內(nèi)容顯示了一名測試員正在玩「Horizon Call of the Mountain」，并演示了基于Sense手柄的手指運動。
基于Sense手柄，用戶手指運動將能轉(zhuǎn)換為三維輸入，測試者不僅可以進(jìn)行單指運動，更能做出上下交替幾根手指的動作，甚至在乘船過程中張開手指伸入虛擬水面，查看視頻中的顯示屏幕，我們可以清楚看到測試者的虛擬運動，以及如何控制及區(qū)分不同手指動作。
值得一提的是，VR手部精確復(fù)制部分是通過Sense手柄的壓力傳感器實現(xiàn)的，PSVR 2可以識別手柄的握持方式，因此可以相應(yīng)表示VR手部動作，如果手柄失去連接或難以檢測到壓力點，PSVR 2的AI系統(tǒng)就會接管并完成手部動畫。
將你的PSVR 2游戲玩法變成NFT——索尼新專利
此外，上周四發(fā)布的索尼新專利展示了支持?jǐn)?shù)字資產(chǎn)交易的區(qū)塊鏈基礎(chǔ)設(shè)施。
該專利支持游戲玩家將游戲體驗創(chuàng)建為NFT，索尼系統(tǒng)可以以屏幕截圖或視頻錄制的形式捕捉游戲時刻，并將它們轉(zhuǎn)化為具有獨特元數(shù)據(jù)的NFT，該專利還以游戲?qū)ο蠡蛴螒蚪巧鳛槭纠?/p>
這些數(shù)據(jù)將跨設(shè)備存儲，索尼表示，Playstation 4和Playstation 5以及PSVR 2均支持這一專利，而該專利將使用戶能夠查看資產(chǎn)歷史，從而深入了解NFT以往所有者和所有元數(shù)據(jù)。
來源：Mixed
據(jù)VRScout報道，由Tom Man Design開發(fā)的VR槍形手柄“ViR”以其逼真的力反饋和獨特的人體工程學(xué)設(shè)計，改善了VR槍支觸感，該設(shè)備旨在提供身臨其境的VR槍戰(zhàn)體驗。
受PlayStation 5手柄啟發(fā)，ViR觸感槍擁有時尚、緊湊的設(shè)計，猶如科幻電影所展現(xiàn)，Tom Man Design聲稱該手柄具備動態(tài)觸發(fā)器和能夠模擬后坐力的執(zhí)行器，每當(dāng)用戶使用ViR“射擊”時，都將能感受逼真的后坐力，如同操作真正槍支一般。
不僅如此，ViR還配置了前置立體攝像頭，以及支持完整手指追蹤，例如，當(dāng)用戶把手指從ViR扳機上移開，那么所對應(yīng)的虛擬目標(biāo)也會產(chǎn)生相同的效果，盡管這似乎是一個相對較小的功能，但往往細(xì)節(jié)決定了游戲和應(yīng)用沉浸感的整體效果。
Tom Man Design官網(wǎng)顯示，ViR曾計劃去年推出，但后續(xù)便沒有了相關(guān)報道。目前而言，市場上LBE VR廠商一直致力于引進(jìn)性能優(yōu)異且先進(jìn)的硬件，但家庭娛樂VR外設(shè)依然相對難以獲得。
該專利描述了由電容式觸摸傳感器、攝像頭以及跟蹤光學(xué)和超聲波數(shù)據(jù)的傳感器所組成的一維和二維傳感器元件陣列，以跟蹤力和慣性運動。從本質(zhì)上講，基于該手指追蹤設(shè)備，用戶將能控制3D空間中所有可交互對象——功效等同于AR/VR環(huán)境下的鼠標(biāo)，或VR手柄，但區(qū)別的是，手指追蹤設(shè)備簡化了基于元素，以便更適用于用戶手指，從而支持手勢、動作和空中輸入。
根據(jù)專利內(nèi)容，手指追蹤設(shè)備兼容“頭戴式設(shè)備”，支持頭戴式設(shè)備查看包括觸覺反饋在內(nèi)的互動體驗，以幫助用戶了解數(shù)字世界交互存在感；另外，專利還描述了AR連接系統(tǒng)如何識別現(xiàn)實世界的物體以及與手指追蹤設(shè)備的交互作用，并基于頭顯將旋轉(zhuǎn)和角度等信息覆蓋至物理物體上，值得注意的是，由于用戶手指指尖暴露在外——這可能是為了更便捷與iPhone、MacBook等觸摸屏設(shè)備互動，從而定位用戶手指追蹤設(shè)備。
種種跡象表明，蘋果正處于進(jìn)入AR/VR領(lǐng)域的風(fēng)口浪尖，Meta、索尼、Snap等公司都在押注元宇宙，毫無疑問，創(chuàng)新將是脫穎而出的關(guān)鍵。
與蘋果手指追蹤設(shè)備設(shè)計思路不同，Meta正朝支持手勢的手部追蹤方向深入研發(fā)，該追蹤基于頭顯板載攝像頭和空間傳感器以識別用戶手部和手指并進(jìn)行相應(yīng)追蹤。
值得一提的是，目前還沒有任何系統(tǒng)能夠提供與手持設(shè)備所能提供的精確度相同的控制，蘋果手指追蹤專利似乎結(jié)合了這兩種解決方案——該設(shè)備小到足以讓人忽視卻能使人沉浸MR環(huán)境之內(nèi)，同時又提供了基于傳感器及相關(guān)追蹤技術(shù)的增強追蹤功能以實現(xiàn)手指追蹤。