據(jù)外媒appleinsider報(bào)道，蘋果正在開發(fā)VR/AR頭顯以及被稱為“Apple Glass”的AR智能眼鏡，當(dāng)開發(fā)深入人機(jī)交互領(lǐng)域時(shí)，蘋果也在嘗試各種能提高人機(jī)交互的解決方案，以使其產(chǎn)品從眾多競(jìng)爭(zhēng)對(duì)手之中脫穎而出。

近日美國專利商標(biāo)局公布的一項(xiàng)蘋果專利闡述了蘋果對(duì)于VR/AR人機(jī)交互的理解，蘋果認(rèn)為該專利可以改進(jìn)頭顯的性能，包括與用戶的交互方式。

這項(xiàng)名為“生成身體姿態(tài)信息”的專利描繪了系統(tǒng)如何追蹤用戶肢體動(dòng)作以及基于數(shù)據(jù)同步反饋VR化身動(dòng)作。

蘋果認(rèn)為，一些計(jì)算機(jī)生成的沉浸式現(xiàn)實(shí)體驗(yàn)不能完美呈現(xiàn)用戶肢體動(dòng)作。在某些情況下，VR或AR應(yīng)用可能會(huì)根據(jù)用戶的姿勢(shì)或動(dòng)作改變其呈現(xiàn)的內(nèi)容，例如游戲中的守衛(wèi)可對(duì)用戶的肢體動(dòng)作做出不同的反應(yīng)。

蘋果表示追蹤用戶肢體動(dòng)作將能控制用戶虛擬化身，該運(yùn)動(dòng)機(jī)制在VRChat等基于VR化身的在線VR社交平臺(tái)將大有作用。

根據(jù)該專利，蘋果表示可以使用大量攝像頭和神經(jīng)網(wǎng)絡(luò)來學(xué)習(xí)人體肢體動(dòng)作，多個(gè)神經(jīng)網(wǎng)絡(luò)協(xié)同工作以模擬單個(gè)身體關(guān)節(jié)。盡管每個(gè)神經(jīng)網(wǎng)絡(luò)單獨(dú)工作，但將結(jié)果匯總在一起便能創(chuàng)建人體全身模型。

不僅如此該神經(jīng)網(wǎng)絡(luò)還要學(xué)習(xí)攝像頭數(shù)據(jù)，以及各個(gè)神經(jīng)網(wǎng)絡(luò)之間的相互交互，這包括了“確定多個(gè)分支神經(jīng)網(wǎng)絡(luò)系統(tǒng)的各自拓?fù)浣Y(jié)構(gòu)”。據(jù)悉該神經(jīng)網(wǎng)絡(luò)可以收集到肩關(guān)節(jié)、肘關(guān)節(jié)、腕關(guān)節(jié)、骨盆關(guān)節(jié)、膝關(guān)節(jié)、踝關(guān)節(jié)、指關(guān)節(jié)在內(nèi)的人體關(guān)節(jié)數(shù)據(jù)。

值得一提的是雖然該專利涵蓋了創(chuàng)建用戶身體模型所需的所有基本要素，但還不完善。例如，雖然神經(jīng)網(wǎng)絡(luò)可以收集“指關(guān)節(jié)”數(shù)據(jù)，但很可能其只作為手勢(shì)追蹤的關(guān)鍵元素之一，而腳趾或腳部運(yùn)動(dòng)似乎也沒有達(dá)到精度標(biāo)準(zhǔn)。