谷歌開發(fā)實(shí)時(shí)手指跟蹤算法

?? 由 文心大模型 生成的文章摘要
谷歌發(fā)布了一種開源算法,可以在移動(dòng)硬件上執(zhí)行實(shí)時(shí)21點(diǎn)手指跟蹤。該系統(tǒng)是Google MediaPipe的一部分,MediaPipe是一種基于機(jī)器學(xué)習(xí)的解決方案的模塊化框架,如人臉檢測(cè),對(duì)象檢測(cè)和頭發(fā)檢測(cè)。
當(dāng)人們戴上VR頭顯時(shí),通常所做的第一件事就是伸出雙手,跟蹤控制器也非常適合游戲。
在非交互式VR體驗(yàn)和社交VR中,傳統(tǒng)的控制器往往不能達(dá)到手控的理想效果。
谷歌提到該公司計(jì)劃在未來(lái)“通過(guò)更強(qiáng)大和穩(wěn)定的跟蹤來(lái)擴(kuò)展這項(xiàng)技術(shù)”。這種技術(shù)可能會(huì)讓VR一體機(jī)具有自然的輸入交互。
同樣Facebook也在研究基于相機(jī)的手指追蹤,F(xiàn)acebook提交了一個(gè)專利申請(qǐng),通過(guò)讀取用戶手腕內(nèi)部的電信號(hào)來(lái)執(zhí)行手指跟蹤,機(jī)器學(xué)習(xí)用于將這些信號(hào)轉(zhuǎn)換為手指位置。
該專利描述了該裝置的兩種變型。其一是通過(guò)手腕發(fā)送活動(dòng)信號(hào),根據(jù)信號(hào)通過(guò)手臂的肌腱和肌肉發(fā)生變化,可以確定其位置。
在另一個(gè)變型中,沒(méi)有發(fā)送有效信號(hào)。相反,設(shè)備在沒(méi)有探測(cè)信號(hào)的情況下直接讀取臂的阻抗。
Facebook已經(jīng)在大力研究光學(xué)手指追蹤。HTC 去年年底宣布為Vive Pro進(jìn)行手指追蹤。Vive Pro的手指跟蹤將通過(guò)VIVEPORT SDK提供給所有注冊(cè)的VIVEPORT開發(fā)人員。
手指跟蹤可用于社交VR,不需要控制器的被動(dòng)體驗(yàn)以及企業(yè)應(yīng)用程序。一些企業(yè)已經(jīng)使用了Leap Motion手指跟蹤附加功能,可以在所有PCVR頭顯上使用,但HTC的解決方案應(yīng)該可以直接使用。該功能還應(yīng)在HTC Vive無(wú)線適配器的無(wú)線模式下完全發(fā)揮作用。

【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】