12月8日，由陀螺科技主辦的2023未來商業(yè)生態(tài)鏈接大會（FBEC2023）在深圳召開。大會以“合力共生·韌者行遠(yuǎn)”為主題，關(guān)注AI、元宇宙、XR、游戲、電競、數(shù)字經(jīng)濟(jì)等科技與互聯(lián)網(wǎng)前沿領(lǐng)域，聚焦時代與商業(yè)熱點(diǎn)議題，探討新科技、新商業(yè)、新模式的未來價值。
作為國內(nèi)眼球追蹤技術(shù)領(lǐng)域的領(lǐng)軍企業(yè)，七鑫易維受邀出席，副總裁路偉成發(fā)表「XR眼球追蹤的關(guān)鍵點(diǎn)」主題演講，深入解析了眼球追蹤技術(shù)在XR領(lǐng)域的發(fā)展現(xiàn)狀、應(yīng)用價值以及未來趨勢。
路偉成在演講中表示，全球領(lǐng)軍消費(fèi)電子公司蘋果的首款XR產(chǎn)品——Vision Pro就集成了眼球追蹤技術(shù)，實(shí)現(xiàn)了注視點(diǎn)渲染、瞳距調(diào)節(jié)、眼控交互、Optic ID（虹膜識別）、Eyesight（反向透視）、Persona（表情追蹤）等一系列實(shí)用且極具科技感的功能和體驗，“第一次將眼球追蹤技術(shù)在XR領(lǐng)域的真正潛力呈現(xiàn)給世人?！?/p>
除了蘋果，微軟、Meta、索尼、PICO、Magic Leap等主流XR品牌幾乎全部推出了搭載眼球追蹤功能的XR型號，“可以說，作為XR領(lǐng)域的關(guān)鍵核心技術(shù)之一，XR眼球追蹤的時代已經(jīng)到來?！?/p>
眼球追蹤在XR領(lǐng)域的應(yīng)用場景
路偉成認(rèn)為，眼球追蹤在XR領(lǐng)域的主要應(yīng)用場景包括注視點(diǎn)渲染、瞳距調(diào)節(jié)、表情追蹤、交互、身份識別和認(rèn)證、眼動數(shù)據(jù)分析以及虛實(shí)對齊與消除VAC，“8項中，6項已有量產(chǎn)XR型號使用?！?/p>
落地場景1：注視點(diǎn)渲染（含動態(tài)超分和反畸變）
路偉成表示，加入眼球追蹤的VR中，都應(yīng)用了注視點(diǎn)渲染功能，即便是擁有地表最強(qiáng)移動芯片的蘋果Vision Pro也不例外，這是因為結(jié)合眼球追蹤與注視點(diǎn)渲染技術(shù)，可以大幅降低渲染壓力。
“以《Red Matter 2》為例，登陸Quest Pro后，像素密度較之前提升了33%（等同于視覺中心的像素數(shù)量增加了77%），文字清晰度、光影和色彩表現(xiàn)足夠優(yōu)秀，突破了Quest Pro的圖形性能極限。再看PSVR2，在使用動態(tài)照明與陰影等高要求圖形質(zhì)量下，同時開啟注視點(diǎn)渲染和眼球追蹤時最多可以將幀數(shù)提高3.6倍?！?/p>
落地場景2：瞳距（IPD）調(diào)節(jié)
路偉成表示，搭載眼球追蹤的VR，包括蘋果Vision Pro，基本都標(biāo)配了瞳距調(diào)節(jié)，“早在2018年，七鑫易維就與歌爾合作，推出了自動瞳距調(diào)節(jié)的VR原型機(jī)。”
落地場景3：表情追蹤（+反向透視）
路偉成認(rèn)為，3D數(shù)字形象產(chǎn)生的“恐怖谷”效應(yīng)，很大程度上是因為其眼神缺少生氣，通過眼球追蹤功能，能幫助數(shù)字形象畫龍點(diǎn)睛，從而在社交、通訊等實(shí)際應(yīng)用中，帶來更真實(shí)和沉浸的體驗。
路偉成表示，加入眼球追蹤的VR，都能實(shí)現(xiàn)表情追蹤，Vision Pro更是在此基礎(chǔ)上，額外增加了反向透視功能，實(shí)現(xiàn)了虛實(shí)“兼顧”，“七鑫易維很早就實(shí)現(xiàn)了通過眼球追蹤進(jìn)行表情追蹤的功能，可以把人的表情，眼部表情都表現(xiàn)出來。”
落地場景4：身份識別和認(rèn)證
雖然目前僅蘋果Vision Pro和微軟HoloLens 2使用虹膜識別作為身份識別方式，但路偉成堅定認(rèn)為這是“最適合XR的身份識別和認(rèn)證方式，沒有之一”。
在路偉成看來，虹膜識別與眼球追蹤共用一套硬件系統(tǒng)，可以最大可能的降低重量、體積、功耗以及成本。同時，眼球追蹤是很好的活體識別方式，能進(jìn)一步提升虹膜識別的安全性；虹膜識別則能給眼球追蹤提供身份信息，實(shí)現(xiàn)校準(zhǔn)信息的自動識別與切換，方便快捷。
據(jù)路偉成透露，今年早些時候，七鑫易維與微信支付、創(chuàng)維XR聯(lián)合推出了虹膜識別&眼球追蹤的XR方案，預(yù)計很快就可以實(shí)現(xiàn)量產(chǎn)。
落地場景5：交互
在交互方面，路偉成認(rèn)為，蘋果的Vision Pro開創(chuàng)性的將眼球追蹤、手勢識別、語音交互深度融合，組成了一套更符合人類直覺的空間交互系統(tǒng)，必然會帶來繼鍵鼠交互、觸控交互之后的第三次交互范式大變革。
“這與七鑫易維一直以來所推崇的‘眼手口’多模態(tài)自然交互理念不謀而合，三種交互技術(shù)既各展所長又互相彌補(bǔ)，在實(shí)現(xiàn)更少學(xué)習(xí)成本的同時，更加符合人類交互習(xí)慣，幾乎肯定會成為空間計算時代的標(biāo)配。”
落地場景6：眼動數(shù)據(jù)分析
路偉成表示，眼動數(shù)據(jù)分析可以挖掘用戶的心理與生理信息，能應(yīng)用于用戶畫像、腦認(rèn)知健康與視覺健康、人因分析和用戶體驗、教育培訓(xùn)等領(lǐng)域，在B端已經(jīng)廣泛應(yīng)用，接下來會逐步滲透到C端。
路偉成認(rèn)為，除了上述6個已經(jīng)落地的場景，虛實(shí)對齊和消除VAC將是未來很快落地的2個場景?！癆R常用的場景就是虛實(shí)融合，如導(dǎo)航，要在真實(shí)的路面上出現(xiàn)虛擬導(dǎo)航的軌跡，需要實(shí)時根據(jù)用戶眼睛的位置進(jìn)行調(diào)整，也就是需要眼球追蹤。另外，隨著變焦系統(tǒng)逐步成熟，消除VAC就自然而然產(chǎn)生需求?！?/p>
對標(biāo)蘋果Vision Pro 國產(chǎn)自主“單目雙攝”XR眼球追蹤方案
XR眼球追蹤是否達(dá)到了高可用性？蘋果已經(jīng)用“七年磨一劍”的Vision Pro給我們做了示范，完全不用再懷疑。路偉成透露，七鑫易維已打造出與蘋果Vision Pro類似的“單眼雙相機(jī)”XR眼球追蹤方案，原型機(jī)預(yù)計很快就會出來。
路偉成表示，七鑫易維這套“單眼雙相機(jī)”XR眼球追蹤方案在精準(zhǔn)度、可用性等關(guān)鍵指標(biāo)上均達(dá)到了行業(yè)領(lǐng)先水平，并在多個核心技術(shù)領(lǐng)域?qū)崿F(xiàn)了自主可控。
硬幣的另一面 XR眼球追蹤的隱私安全問題
事物都有兩面性，就像硬幣有正反面一樣，科技亦不例外。路偉成表示，人眼數(shù)據(jù)是一項至關(guān)重要且非常隱私的用戶生物特征數(shù)據(jù)，“當(dāng)越來越多的XR終端加入眼球追蹤，在賦能XR功能和體驗的同時，隱私風(fēng)險和數(shù)據(jù)安全問題也隨之而來，必須要引起重視?！?/p>
“據(jù)我們了解，所有用戶認(rèn)證用到生物信息，都不可以在海外建數(shù)據(jù)庫，因為這涉及到國家安全。作為國內(nèi)眼球追蹤技術(shù)領(lǐng)域，唯一擁有全面自研與制造能力的高新科技企業(yè)，七鑫易維無論是在硬件、算法，還是軟件上，全部做到了自主可控，不存在‘卡脖子’的問題。”
路偉成表示，七鑫易維已與歌爾、中科創(chuàng)達(dá)、創(chuàng)維XR、小派、XREAL、玩出夢想（YVR）、雷鳥創(chuàng)新、億境EmdoorVR等國內(nèi)頭部XR品牌深入合作，并與高通、英偉達(dá)、騰訊等巨頭以及眾多內(nèi)容開發(fā)團(tuán)隊建立了長期生態(tài)合作伙伴關(guān)系。
在演講的最后，路偉成表示，七鑫易維希望能與產(chǎn)業(yè)鏈上下游的眾多合作伙伴們一起，通過全球領(lǐng)先且完全自主知識產(chǎn)權(quán)的眼球追蹤算法和技術(shù)，努力推動XR產(chǎn)業(yè)發(fā)展，不斷升級和優(yōu)化人機(jī)交互體驗。
