Apple Vision Pro新專利涵蓋基于面部和手部追蹤的AR多模態(tài)輸入

?? 由 文心大模型 生成的文章摘要

美國專利商標(biāo)局正式授予蘋果一項Apple Vision Pro專利,該專利涉及計算機生成的現(xiàn)實環(huán)境,包括在計算機生成的現(xiàn)實環(huán)境中多模態(tài)輸入。雖然錄制空間視頻最初是通過頭顯頂部的按鈕觸發(fā),但蘋果專利透露,在未來,指定的面部表情可以觸發(fā)例如體育賽事等事件錄制。

蘋果專利指出,增強現(xiàn)實技術(shù)旨在通過增強的物理環(huán)境來增強電子信息,從而彌合虛擬環(huán)境和物理環(huán)境之間的差距。因此,電子信息似乎是用戶感知物理環(huán)境的一部分。在示例中,增強現(xiàn)實技術(shù)進(jìn)一步支持了與覆蓋在增強物理環(huán)境中的電子信息交互的用戶界面。

蘋果專利主題技術(shù)的實現(xiàn)至少部分基于電子設(shè)備是否通信耦合到相關(guān)聯(lián)的基本設(shè)備來確定電子設(shè)備的操作模式?;谒_定的操作模式,本主題技術(shù)識別用于啟動電子設(shè)備的視野內(nèi)的內(nèi)容記錄的一組輸入模態(tài)。

本主題技術(shù)監(jiān)視由包括在電子設(shè)備中或通信耦合到電子設(shè)備的至少一個傳感器生成的傳感器信息。

此外,當(dāng)所監(jiān)視的傳感器信息指示所識別的一組輸入模態(tài)中的至少一個已被觸發(fā)時,本主題技術(shù)發(fā)起對電子設(shè)備視野內(nèi)內(nèi)容的記錄。

Apple Vision Pro可能包括可以接收用戶輸入的硬件元件,例如硬件按鈕或開關(guān)。傳感器和/或硬件元件檢測到的用戶輸入對應(yīng)于例如用于從應(yīng)用內(nèi)發(fā)起共存會話的各種輸入模態(tài)。

例如,輸入模態(tài)可以包括但不限于面部追蹤、眼睛追蹤(例如凝視方向)、手部追蹤、姿勢追蹤、生物測定讀數(shù)(例如心率、脈搏、瞳孔擴張、呼吸、溫度、腦電圖、嗅覺)、識別語音或音頻(例如,特定的熱詞)以及激活按鈕或開關(guān)等。

蘋果專利圖3B和圖3C示出了根據(jù)本主題技術(shù)實施方式的追蹤凝視方向以啟動計算機生成的現(xiàn)實記錄的示例:圖4B和4C示出了在計算機生成的現(xiàn)實環(huán)境內(nèi)確定感興趣區(qū)域并基于感興趣區(qū)域啟動記錄的示例;圖5B和5C示出了根據(jù)本主題技術(shù)實現(xiàn)向計算機生成的現(xiàn)實環(huán)境內(nèi)的各種對象或?qū)嶓w提供注釋的示例。

來源:patentlyapple

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請注明出處」