
美國專利商標局正式公布了蘋果71項新專利,其中涉及與Apple Vision Pro相關(guān)的名為“Glint-Assisted Gaze Tracker”(閃爍輔助視線追蹤)的專利。
該專利涵蓋了VR/AR頭戴式顯示器(HMD)中閃爍輔助視線追蹤的方法和裝置,凝視追蹤相機捕獲的圖像可以輸入到閃爍檢測過程和瞳孔檢測過程,例如由HMD控制器的一個或多個處理器實現(xiàn)。
閃爍檢測過程可以檢測圖像中的閃爍并將閃爍信息傳遞到瞳孔檢測過程,其中檢測到的閃爍可以用于檢測瞳孔位置和輪廓。閃爍信息還可以由閃爍檢測過程傳遞到閃爍LED匹配過程,閃爍LED匹配過程將檢測到的閃爍與凝視追蹤系統(tǒng)發(fā)光元件中的特定發(fā)光元件相匹配。閃爍-LED匹配過程(檢測到的閃爍和LED對應(yīng))和瞳孔檢測過程(檢測到的瞳孔橢圓)的結(jié)果被傳遞到凝視估計過程,例如由控制器的一個或多個處理器實現(xiàn),以估計用戶的凝視點。
在凝視估計過程中,三維角膜中心估計過程基于檢測到的閃爍和LED對應(yīng)以及表示特定用戶眼睛參數(shù)的用戶校準數(shù)據(jù)來估計3D空間中用戶角膜的中心。3D瞳孔中心估計過程基于檢測到的瞳孔橢圓、用戶校準數(shù)據(jù)和角膜中心估計過程的輸出來估計3D空間中的用戶瞳孔的中心。光軸重建過程基于角膜中心估計過程和瞳孔中心估計過程的輸出在3D空間中重建用戶眼睛的光軸(連接角膜中心和瞳孔中心的軸)。視軸重建過程基于光軸重建過程的輸出和用戶校準數(shù)據(jù)在3D空間中重建用戶眼睛的視軸(連接中央凹和角膜中心的軸)。失真顯示點估計過程根據(jù)視軸重建過程的輸出和設(shè)備特定的HMD校準數(shù)據(jù)來估計HMD顯示器上的點(注視點)。

蘋果專利圖3A、3B、3C和3D示出了實現(xiàn)注視追蹤系統(tǒng)的示例HMD的側(cè)視圖和前視圖。
來源:patentlyapple








