據(jù)外媒appleinsider報道，蘋果正在開發(fā)VR/AR頭顯以及被稱為“Apple Glass”的AR智能眼鏡，當(dāng)開發(fā)深入人機交互領(lǐng)域時，蘋果也在嘗試各種能提高人機交互的解決方案，以使其產(chǎn)品從眾多競爭對手之中脫穎而出。

近日美國專利商標(biāo)局公布的一項蘋果專利闡述了蘋果對于VR/AR人機交互的理解，蘋果認(rèn)為該專利可以改進(jìn)頭顯的性能，包括與用戶的交互方式。

這項名為“生成身體姿態(tài)信息”的專利描繪了系統(tǒng)如何追蹤用戶肢體動作以及基于數(shù)據(jù)同步反饋VR化身動作。

蘋果認(rèn)為，一些計算機生成的沉浸式現(xiàn)實體驗不能完美呈現(xiàn)用戶肢體動作。在某些情況下，VR或AR應(yīng)用可能會根據(jù)用戶的姿勢或動作改變其呈現(xiàn)的內(nèi)容，例如游戲中的守衛(wèi)可對用戶的肢體動作做出不同的反應(yīng)。

蘋果表示追蹤用戶肢體動作將能控制用戶虛擬化身，該運動機制在VRChat等基于VR化身的在線VR社交平臺將大有作用。

根據(jù)該專利，蘋果表示可以使用大量攝像頭和神經(jīng)網(wǎng)絡(luò)來學(xué)習(xí)人體肢體動作，多個神經(jīng)網(wǎng)絡(luò)協(xié)同工作以模擬單個身體關(guān)節(jié)。盡管每個神經(jīng)網(wǎng)絡(luò)單獨工作，但將結(jié)果匯總在一起便能創(chuàng)建人體全身模型。

不僅如此該神經(jīng)網(wǎng)絡(luò)還要學(xué)習(xí)攝像頭數(shù)據(jù)，以及各個神經(jīng)網(wǎng)絡(luò)之間的相互交互，這包括了“確定多個分支神經(jīng)網(wǎng)絡(luò)系統(tǒng)的各自拓?fù)浣Y(jié)構(gòu)”。據(jù)悉該神經(jīng)網(wǎng)絡(luò)可以收集到肩關(guān)節(jié)、肘關(guān)節(jié)、腕關(guān)節(jié)、骨盆關(guān)節(jié)、膝關(guān)節(jié)、踝關(guān)節(jié)、指關(guān)節(jié)在內(nèi)的人體關(guān)節(jié)數(shù)據(jù)。

值得一提的是雖然該專利涵蓋了創(chuàng)建用戶身體模型所需的所有基本要素，但還不完善。例如，雖然神經(jīng)網(wǎng)絡(luò)可以收集“指關(guān)節(jié)”數(shù)據(jù)，但很可能其只作為手勢追蹤的關(guān)鍵元素之一，而腳趾或腳部運動似乎也沒有達(dá)到精度標(biāo)準(zhǔn)。