目前，七鑫易維已成功為驍龍845平臺提供了完整的眼球追蹤解決方案，并且在高通的845 VR一體機(jī)上驗證了該方案。
該方案充分利用了驍龍845平臺針對XR（AR/VR）所提供的各項技術(shù)優(yōu)勢：
利用驍龍845平臺的Adreno™ 630 GPU，結(jié)合高通的SNPE（Snapdragon Neural Processing Engine），推出了適用于移動平臺的眼球追蹤深度學(xué)習(xí)算法，深度學(xué)習(xí)算法的應(yīng)用使眼球追蹤的適用范圍大大擴(kuò)展，比如戴眼鏡的人群、不同的人種其他復(fù)雜環(huán)境等。
結(jié)合驍龍845平臺的Hexagon™ 685 DSP與高通的FastCV機(jī)器視覺算法庫，眼球追蹤算法速度得到進(jìn)一步的提升，大大降低了對CPU和功耗的壓力，使眼球追蹤算法更加適用于移動平臺。
除了VR，七鑫易維的眼球追蹤技術(shù)還應(yīng)用在基于驍龍平臺的AR產(chǎn)品中，多個AR眼鏡企業(yè)已經(jīng)展開了與七鑫易維的合作。
七鑫易維AR/VR眼球追蹤解決方案可以應(yīng)用于多種場景：
注視點渲染：利用人眼的特征，只對注視點區(qū)域的顯示進(jìn)行高清渲染，可以大幅度降低顯示渲染壓力，降低渲染延遲，減小用戶的眩暈感，降低硬件成本。
眼控交互：利用人眼視線在AR或VR中進(jìn)行輔助交互，結(jié)合其他交互手段，可以達(dá)到更加自然的交互體驗。
眼動數(shù)據(jù)分析：用戶在AR/VR中的眼動數(shù)據(jù)對商家來講是非常有價值的，可以用來分析用戶的注意力、興趣點、興奮度等各種情緒信息，應(yīng)用于市場分析、廣告分析等領(lǐng)域。同時，這些數(shù)據(jù)也可以用于心理學(xué)研究。
瞳距自動檢測：通過眼球追蹤技術(shù)檢測出用戶的瞳距并通過電動馬達(dá)等機(jī)械結(jié)構(gòu)為用戶進(jìn)行自動調(diào)節(jié)，使用戶可以體驗更加清晰和完美的AR/VR視野場景。
虛擬社交眼神交互：在AR/VR社交應(yīng)用中，可以完美復(fù)刻出用戶的視線和眼睛運動，比如眨眼、瞇眼、瞪大眼睛等，這樣使社交應(yīng)用更加真實，用戶之間的交流會更加順暢。
虹膜識別活體檢測：七鑫易維已經(jīng)推出了結(jié)合虹膜識別的眼球追蹤方案，該方案可以實現(xiàn)低成本的活體檢測，在AR/VR電商領(lǐng)域可以有很好的應(yīng)用。
眼疾輔助診斷與康復(fù)：七鑫易維的眼球追蹤可以實現(xiàn)特定需求的校準(zhǔn)和追蹤，應(yīng)用于弱視、斜視等眼睛類疾病的輔助診斷和康復(fù)訓(xùn)練。
七鑫易維CEO黃通兵表示，除了在AR/VR領(lǐng)域，在今年下半年，基于高通驍龍845芯片，七鑫易維將陸續(xù)推出應(yīng)用于手機(jī)、平板等移動電子設(shè)備的眼球追蹤技術(shù)以及解決方案，應(yīng)用的場合包括：
注視感知：通過眼球追蹤技術(shù)，進(jìn)行人眼視線檢測，判斷用戶的注視區(qū)域。例如當(dāng)人眼的關(guān)注視線落在手機(jī)屏幕上時，可認(rèn)為此時用戶傳達(dá)了交互的目的，即注視感知。而在用戶視線偏離手機(jī)屏幕時，視線檢測結(jié)果將幫助手機(jī)不要進(jìn)行“非注視”下的操作；
活體檢測：基于眼球追蹤的活體檢測技術(shù)，相對傳統(tǒng)生物識別系統(tǒng)的活體檢測技術(shù)具有更高的魯棒性，紅外成像技術(shù)使眼球追蹤活體檢測技術(shù)具有全天時特性，亦可以結(jié)合人臉、虹膜等生物技術(shù)一同使用，例如在Face ID中，可以防止在用戶不知情的情況下，其他人利用其面部特征解鎖設(shè)備；
眼動交互：基于驍龍845芯片，開發(fā)包括硬件、圖像算法、視線算法等一系列眼球追蹤技術(shù)，實現(xiàn)用戶用眼睛操作手機(jī)的目的，目標(biāo)在于提高人機(jī)交互效率和用戶體驗?；蛘咴谑謾C(jī)與顯示器結(jié)合的場景中，作為輔助交互手段。
除了上述領(lǐng)域外，高通還與七鑫易維在醫(yī)療、智能駕駛、智能家居等多個領(lǐng)域進(jìn)行合作。
作為中國高新技術(shù)企業(yè)領(lǐng)軍者之一，七鑫易維最早發(fā)布了全球首款VR眼球追蹤配件，并最早擁有了基于人工智能的眼球追蹤算法。作為高通的眼球追蹤技術(shù)合作伙伴，七鑫易維將持續(xù)用眼控技術(shù)賦能XR與5G，并保持眼控技術(shù)在中國與世界的領(lǐng)先性。
]]>
而我們今天有幸采訪到了指揮家VR創(chuàng)始人兼CEO曾子轅和他帶來的全球首款眼控內(nèi)容產(chǎn)品—-VR眼控注意力大數(shù)據(jù)系統(tǒng)——VR Eyetrack Data。
指揮家VR- VR眼控注意力大數(shù)據(jù)系統(tǒng)產(chǎn)品海報
這款產(chǎn)品就是對于VR眼控技術(shù)優(yōu)點的很好詮釋。眼控技術(shù)在VR的最直接應(yīng)用在于注意力渲染，即對重點區(qū)域進(jìn)行高分辨率渲染而對非重點區(qū)域做低分辨率渲染，能夠有效的降低入門級VR設(shè)備的價格，而更具深度的應(yīng)用則來自于對眼動所代表的人的注意力進(jìn)行搜集和分析。指揮家VR的產(chǎn)品就利用這兩大特點進(jìn)行開發(fā)，對于注視焦點5°角范圍內(nèi)進(jìn)行高分辨率渲染，同時對視線內(nèi)物體、物體部位、區(qū)域進(jìn)行加權(quán)分析，生成熱力圖反饋，從而實現(xiàn)注意力收集，從數(shù)據(jù)技術(shù)的深度反應(yīng)了眼控給VR行業(yè)帶來的變革。以眼控收集的注意力大數(shù)據(jù)為基礎(chǔ)，實現(xiàn)不同場景下的用戶畫像系統(tǒng)，同時應(yīng)用模態(tài)分析的方法，對用戶注意力模式進(jìn)行模擬，能夠為空間設(shè)計、VR內(nèi)商品擺放等提供更高效快速的分析評價工具，實現(xiàn)內(nèi)容優(yōu)化，讓VR成為更好的生產(chǎn)力工具。
VR眼控注意力大數(shù)據(jù)系統(tǒng)演示效果圖
當(dāng)然就如在眼控硬件開發(fā)中遇到了難以捕捉、分析眼跳頻率和如何解決超低延遲這樣的技術(shù)難點一樣，對于內(nèi)容企業(yè)也需要在研發(fā)過程中克服很大的困難。指揮家VR在該產(chǎn)品的開發(fā)中，就遇到了如如何根據(jù)眼動數(shù)據(jù)搜集關(guān)注的物體及關(guān)注區(qū)域，如何實現(xiàn)超大數(shù)據(jù)量的存儲與快速分析，如何避免數(shù)據(jù)搜集影響用戶體驗，如何將分析結(jié)果直觀的展現(xiàn)出來等諸多問題。然而最大的問題來自于結(jié)果的展現(xiàn)，UE4引擎作為頂級游戲圖形引擎，為了效率考慮渲染管線只允許有限的數(shù)值運算，如何將眼動的大數(shù)據(jù)庫與渲染管線綁定困擾了研發(fā)團(tuán)隊許久，最終他們對引擎做了部分修改才解決問題。
目前這款產(chǎn)品是指揮家VR根據(jù)自身現(xiàn)有的業(yè)務(wù)形態(tài)及硬件設(shè)備而打造。后續(xù)技術(shù)團(tuán)隊還會從更多的層面帶來眼控內(nèi)容產(chǎn)品的迭代。未來將以眼控收集的注意力大數(shù)據(jù)為基礎(chǔ)，實現(xiàn)不同場景下的用戶畫像系統(tǒng)，同時應(yīng)用模態(tài)分析的方法，對用戶注意力模式進(jìn)行模擬，能夠為空間設(shè)計、VR內(nèi)商品擺放等提供更高效快速的分析評價工具，實現(xiàn)內(nèi)容優(yōu)化，讓VR成為更好的生產(chǎn)力工具。
隨著VR領(lǐng)域眼控硬件的不斷發(fā)展完善，一定會有越來越多的VR內(nèi)容企業(yè)涉獵這一板塊，同時我們也希望諸如指揮家VR這樣有著極強(qiáng)研發(fā)能力的VR企業(yè)們能夠一直走在行業(yè)前沿，不斷突破自己，為我們帶來更多更出色的產(chǎn)品。
]]>
（YiViAn 2016年3月23日）專注于眼球追蹤技術(shù)的北京虛擬現(xiàn)實公司七鑫易維今天下午宣布，受顯卡芯片制作商英偉達(dá)邀請，將參加英偉達(dá)4月份的GTC大會。本年度GTC大會以虛擬現(xiàn)實為重點，將于4月4日至7日在美國加州圣荷西會議中心舉行。
YiViAn曾詳細(xì)報道過采用眼球追蹤技術(shù)的注視點渲染技術(shù)，可以追蹤用戶的人眼注視點位置，并對注視點區(qū)域進(jìn)行全高清渲染，而對周邊區(qū)域進(jìn)行低分辨率渲染。七鑫易維曾向YiViAn表示，通過其公司的注視點渲染技術(shù)可將圖像刷新幀率提高到240Hz，遠(yuǎn)超過虛擬現(xiàn)實的60Hz的標(biāo)準(zhǔn)。
相比虛擬現(xiàn)實的全場景渲染，注視點渲染技術(shù)能實現(xiàn)局部渲染，讓用戶的集中注視區(qū)域獲得全高清渲染的圖像，同時也降低了對GPU的運算量。而運算量的降低，同樣可以降低虛擬現(xiàn)實對PC配置的要求。
關(guān)于本次GTC大會，七鑫易維表示將在大會上首次展出其眼控技術(shù)。此外，七鑫易維還表示今年內(nèi)將推出可適配虛擬現(xiàn)實眼鏡盒，虛擬現(xiàn)實頭顯以及虛擬現(xiàn)實一體機(jī)的眼控模塊，方便虛擬現(xiàn)實頭顯廠商配備眼球追技術(shù)。
]]>