Nreal發(fā)布手部追蹤API重大更新,支持HoloLens手勢應(yīng)用

?? 由 文心大模型 生成的文章摘要

據(jù)Auganix報(bào)道,AR智能眼鏡廠商N(yùn)real對(duì)旗下手部追蹤API進(jìn)行了重大更新,該更新改進(jìn)了包括快速自遮擋手部動(dòng)作在內(nèi)的手勢和虛擬對(duì)象操作。Nreal表示,此次更新有助于開發(fā)者便捷開發(fā)相關(guān)應(yīng)用,同時(shí)提高了API穩(wěn)定性和準(zhǔn)確性,降低了延遲、并實(shí)現(xiàn)新的交互功能。

Nreal透露,“Nreal團(tuán)隊(duì)近期基于深度學(xué)習(xí)人工智能技術(shù),在手部追蹤開發(fā)方面取得了重大進(jìn)展”,該公司指出,根據(jù)數(shù)百萬張手部圖像及其相應(yīng)的標(biāo)簽,以關(guān)節(jié)和指尖為重點(diǎn),訓(xùn)練了一個(gè)專門設(shè)計(jì)的深度神經(jīng)網(wǎng)絡(luò),由此生成的網(wǎng)絡(luò)模型將能檢測基于Nreal Light攝像頭拍攝的手部,隨后便可計(jì)算手部關(guān)鍵點(diǎn)在3D空間中的位置。

通過計(jì)算,Nreal算法不僅能夠計(jì)算出用戶手部在虛擬空間中的位置和方向(即姿勢信息),還能夠識(shí)別包括捏、抓、張開雙手、V形手勢在內(nèi)的特定手勢,得益于Nreal量身定制的深度學(xué)習(xí)模型和優(yōu)化硬件計(jì)算,用戶手勢動(dòng)作均能實(shí)時(shí)計(jì)算追蹤。

除了上述改進(jìn),Nreal手部追蹤API還集成了MRTK交互工具包,通過整合Nreal NRSDK和MRTK,開發(fā)者可以實(shí)現(xiàn)直觀虛擬對(duì)象操作和內(nèi)容控制體驗(yàn)。同時(shí),這也代表著支持手部跟蹤的HoloLens應(yīng)用也兼容于Nreal設(shè)備。

手部追蹤屬于手勢識(shí)別范疇,可基于XR應(yīng)用賦予用戶存在感、控制感和空間操控感,手部追蹤還可再現(xiàn)人們?cè)诂F(xiàn)實(shí)生活中執(zhí)行的手勢,以便與虛擬空間全息對(duì)象交互使用。而在虛擬空間使用手部追蹤的好處之一便是,使得交互變得更加直觀且高效。

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明出處」