美國專利商標局正式授予蘋果一項重要眼動追蹤專利，涉及注視終點確定方法和裝置，特別是用于確定對象在空間中的三維物體的注視端點。

一種確定三維物體注視點的方法和裝置

蘋果專利涵蓋了一種用于確定受試者注視端點的系統(tǒng)，該系統(tǒng)包括：眼動追蹤單元，適用于確定受試者一只或多只眼睛的注視方向；頭部追蹤單元，適于確定位置，包括頭部和/或眼動追蹤單元相對于參考坐標系的位置和方向；3D場景結(jié)構(gòu)表示單元，其通過參考坐標系中的坐標通過它們的3D位置和/或它們的3D結(jié)構(gòu)來表示現(xiàn)實世界場景的對象，以表示現(xiàn)實世界場景和場景中包含的對象從而提供場景3D結(jié)構(gòu)表示；計算單元，用于基于注視方向、眼動儀位置和3D場景結(jié)構(gòu)表示計算注視端點，和/或用于基于注視方向、眼動儀位置和3D場景結(jié)構(gòu)表示確定受試者所注視的3D場景中的物體。

根據(jù)一個實施例，該系統(tǒng)包括用于計算場景的3D結(jié)構(gòu)表示的對象上的注視端點的模塊，其中基于注視方向與3D結(jié)構(gòu)場景表示中的對象的交集來計算所述注視端點。

注視方向與3D表示的交集提供了一種幾何方法，用于計算注視“擊中”或與3D結(jié)構(gòu)相交的位置，從而提供真實的注視端點，從而可以確定場景3D對象上的真實注視端點。

根據(jù)一個實施例，該系統(tǒng)包括用于基于對象的兩只眼睛的注視方向的交點計算注視端點的模塊，和/或用于基于計算的注視端點確定對象注視的對象模塊以及現(xiàn)實世界場景的對象3D位置和/或3D結(jié)構(gòu)。通過使用聚散度來計算對象眼睛注視方向的交點，可以確定注視終點。然后可以使用該注視端點來確定用戶正在注視的對象。

根據(jù)一個實施例，通過選擇其3D位置和/或結(jié)構(gòu)最接近計算注視端點的對象，將被注視的對象確定為對象正在注視的對象。

根據(jù)一個實施例，適于確定所述對象的所述一只或多只眼睛的注視方向的所述眼動追蹤單元適于確定所述一只或多只眼睛的所述注視方向的概率分布，并且其中所述計算單元用于確定被注視的對象基于注視端點的概率分布為一個或多個對象確定所述對象被注視的概率。

根據(jù)一個實施例，該系統(tǒng)還包括：場景相機，適于從任意視點獲取場景的一個或多個圖像；用于將3D注視端點映射到場景相機拍攝的場景圖像的圖像平面上的模塊。

這樣不僅可以確定3D結(jié)構(gòu)上的3D注視端點，還可以確定場景相機拍攝的任意場景圖像上的對應(yīng)位置。這允許確定相機從任意視點拍攝的場景圖像中的凝視點，換言之，形成任意位置。

根據(jù)一個實施例，場景相機的位置是已知的或通過一些位置確定或?qū)ο笞粉櫃C制來確定，并且映射是通過將3D注視端點投影到所述場景相機的圖像上來執(zhí)行的。

蘋果專利圖2示意性圖示了注視終點確定系統(tǒng)。

來源：patentlyapple