上周，國(guó)際虛擬現(xiàn)實(shí)創(chuàng)新大會(huì)在山東青島召開(kāi)。作為大會(huì)的重要環(huán)節(jié)，2017  VRCORE Awards頒獎(jiǎng)典禮也如期舉行。典禮結(jié)束后，部分頒獎(jiǎng)嘉賓與獲獎(jiǎng)企業(yè)代表接受了來(lái)自各家媒體的采訪。國(guó)內(nèi)領(lǐng)先的眼球追蹤技術(shù)公司七鑫易維的聯(lián)合創(chuàng)始人彭凡在現(xiàn)場(chǎng)介紹了該公司明年的規(guī)劃以及眼球追蹤技術(shù)所包含的三大應(yīng)用方向。

眼球追蹤設(shè)備嵌入VR頭顯是發(fā)展趨勢(shì)

關(guān)于公司明年的規(guī)劃，彭凡表示，目前已有多家VR頭顯企業(yè)已經(jīng)或正在與七鑫易維達(dá)成合作，合作的方式就是在這些企業(yè)的新品或迭代產(chǎn)品中直接集成帶有眼球追蹤技術(shù)的芯片或算法。同時(shí)，集成眼球追蹤技術(shù)的硬件除了VR產(chǎn)品還會(huì)包括AR產(chǎn)品，在VR產(chǎn)品中也會(huì)同時(shí)包含PCVR和VR一體機(jī)產(chǎn)品。

在合作的企業(yè)之中，彭凡也提到了七鑫易維與高通的合作。“其實(shí)高通一直是我們的投資方，從2014年至今，高通已經(jīng)投了我們?nèi)啠拔覀冞€只是投資關(guān)系，我們之間真正的業(yè)務(wù)合作還是從VR開(kāi)始的。未來(lái)我們計(jì)劃與高通合作，在整個(gè)VR/AR產(chǎn)業(yè)鏈的上游，直接把眼球追蹤作為一個(gè)技術(shù)標(biāo)準(zhǔn)。簡(jiǎn)而言之，在不遠(yuǎn)的未來(lái)，眼球追蹤很可能會(huì)成為VR/AR產(chǎn)品的一項(xiàng)基礎(chǔ)功能。

在成本方面，彭凡用一個(gè)手機(jī)的例子進(jìn)行了說(shuō)明。“手機(jī)廠商在手機(jī)里加了一個(gè)攝像頭，這個(gè)攝像頭的成本相對(duì)于手機(jī)的整體成本來(lái)說(shuō)只占到很小的比重。我們之前推出過(guò)針對(duì)HTC VIVE的眼球追蹤配件，這款產(chǎn)品的價(jià)格說(shuō)實(shí)話并不便宜，但如果我們現(xiàn)在將產(chǎn)品直接嵌入VR頭顯，這樣的成本并不高，而如果VR頭顯能夠達(dá)到一個(gè)讓大家都比較滿意的銷量，其實(shí)際增加成本應(yīng)該是很低的。”彭凡同時(shí)指出，對(duì)于各家VR頭顯廠商來(lái)說(shuō)，一項(xiàng)新技術(shù)如果不能及時(shí)在新產(chǎn)品上落地，那么在新產(chǎn)品面向市場(chǎng)的時(shí)候很有可能會(huì)面對(duì)不小的競(jìng)爭(zhēng)壓力，這也是各家廠商對(duì)眼球追蹤技術(shù)比較關(guān)注的原因之一。

眼球追蹤技術(shù)擁有三大應(yīng)用方向

在之后的交流中，彭凡介紹了眼球追蹤技術(shù)的三大應(yīng)用方向：注視點(diǎn)渲染、眼動(dòng)交互和眼動(dòng)數(shù)據(jù)。

第一個(gè)方向是注視點(diǎn)渲染。該項(xiàng)技術(shù)可以讓計(jì)算機(jī)系統(tǒng)只對(duì)用戶的眼球注視點(diǎn)區(qū)域進(jìn)行精確的渲染，同時(shí)對(duì)周邊區(qū)域進(jìn)行低分辨率的渲染，這樣就可以把整個(gè)畫(huà)面的像素從原來(lái)很高的數(shù)量級(jí)降到相對(duì)較低的數(shù)量級(jí)，進(jìn)而達(dá)到優(yōu)化數(shù)據(jù)量、降低PC配置的作用。據(jù)彭凡的介紹，七鑫易維與英偉達(dá)進(jìn)行的內(nèi)部測(cè)試的數(shù)據(jù)顯示，注視點(diǎn)渲染在理論上可以優(yōu)化60-80%的數(shù)據(jù)量，如此就可以讓用戶的VR使用成本大幅降低，進(jìn)而大幅加快VR技術(shù)的應(yīng)用與普及。

第二個(gè)方向是眼動(dòng)交互。對(duì)于開(kāi)發(fā)者而言，眼動(dòng)交互或者眼控技術(shù)為VR應(yīng)用提供了一個(gè)全新的維度。人類的眼球移動(dòng)是一種天然性的弱交互方式，完全可以應(yīng)用在輔助交互上，比如說(shuō)菜單項(xiàng)的選擇，眼動(dòng)相對(duì)于頭動(dòng)，或許是一種更便利的選擇。

第三個(gè)方向目前被許多大公司所看重，那就是眼動(dòng)數(shù)據(jù)的搜集。用戶在游玩VR游戲、觀看全景視頻或使用其他VR應(yīng)用時(shí)，眼睛看了哪里、看了多久、視線如何移動(dòng)這些其實(shí)都是數(shù)據(jù)，這些數(shù)據(jù)就反映了一部分用戶的心理狀況。對(duì)于像京東和阿里這樣的電商企業(yè)來(lái)說(shuō)，這些數(shù)據(jù)非常重要，通過(guò)將這些數(shù)據(jù)整合到用戶數(shù)據(jù)之中，電商乃至更多企業(yè)能夠進(jìn)行更加精準(zhǔn)有效的大數(shù)據(jù)營(yíng)銷，從而產(chǎn)生更大的商業(yè)價(jià)值。

最后，彭凡表示，除了上述三大應(yīng)用方向，他認(rèn)為眼球追蹤一定還存在其他應(yīng)用領(lǐng)域和場(chǎng)景，這就需要有更多的參與者加入，進(jìn)一步分析用戶需求和挖掘用戶價(jià)值，其應(yīng)用前景將會(huì)非常廣闊。

作為一項(xiàng)在VR/AR產(chǎn)業(yè)鏈上游的核心技術(shù)，眼球追蹤在我看來(lái)也同樣有著非常巨大的市場(chǎng)潛力，這一點(diǎn)在我們之前看過(guò)的許多科幻片中都有所體現(xiàn)。眼睛是心靈的窗戶，它們折射出我們的所思所想，也帶給我們一個(gè)美麗的世界。我相信在未來(lái)我們能夠用自己的雙眼創(chuàng)造出更多美好的事物，也希望眼球追蹤技術(shù)能夠助力VR/AR產(chǎn)業(yè)，為用戶帶來(lái)更優(yōu)的體驗(yàn)，為企業(yè)帶來(lái)更多的機(jī)遇。

【913VR原創(chuàng)內(nèi)容，轉(zhuǎn)載請(qǐng)注明及回鏈】

上周我拜訪了一家黑科技公司，這家公司一直關(guān)注眼球追蹤技術(shù)的研發(fā)與應(yīng)用。沒(méi)錯(cuò)，它就是七鑫易維。前不久七鑫易維在北京發(fā)布了全球首款VR眼球追蹤模組aGlass，拜訪過(guò)程中我親身體驗(yàn)了這款設(shè)備的效果，感覺(jué)還是很神奇的。至于七鑫易維到底是一家什么樣的公司，我們還是請(qǐng)七鑫易維聯(lián)合創(chuàng)始人彭凡來(lái)說(shuō)一說(shuō)吧。

最早的技術(shù)來(lái)源于戰(zhàn)斗機(jī)駕駛員的瞄準(zhǔn)技術(shù)

經(jīng)過(guò)與彭凡的交流，我了解到，七鑫易維的創(chuàng)始人黃通兵黃總最早是航空航天專業(yè)出身，之后從事了數(shù)年飛行器制造的工作，當(dāng)時(shí)他接觸了戰(zhàn)斗機(jī)飛行員的瞄準(zhǔn)技術(shù)。關(guān)于戰(zhàn)斗機(jī)飛行員的瞄準(zhǔn)，最早是采用頭動(dòng)控制，有點(diǎn)類似于現(xiàn)在一些移動(dòng)VR游戲中的頭控射擊方式，不過(guò)當(dāng)時(shí)頭動(dòng)控制已經(jīng)暴露出一些問(wèn)題，飛行員在高速飛行時(shí)頭部會(huì)充血，頭部轉(zhuǎn)動(dòng)不靈活，之后各國(guó)就在研究能不能用眼動(dòng)去鎖定瞄準(zhǔn)。當(dāng)時(shí)黃總認(rèn)為將這種眼動(dòng)鎖定瞄準(zhǔn)的技術(shù)作為一種人機(jī)交互技術(shù)用于消費(fèi)級(jí)市場(chǎng)可能會(huì)有一個(gè)很好的前景，于是他在2007、2008年開(kāi)始申請(qǐng)專利，2009年七鑫易維注冊(cè)成立，公司就一直堅(jiān)持在眼球追蹤技術(shù)領(lǐng)域進(jìn)行探索和發(fā)展。

關(guān)于眼球追蹤技術(shù)，其實(shí)沒(méi)有我們想象得那么簡(jiǎn)單。彭凡對(duì)我說(shuō)：“這項(xiàng)技術(shù)如果沒(méi)有長(zhǎng)時(shí)間的積累，很多坑你是繞不過(guò)去的。比如說(shuō)特殊眼球的數(shù)據(jù)積累，我們普通人的眼球都是千差萬(wàn)別的，有時(shí)候我們還會(huì)遇到很多特殊的情況，比如說(shuō)斜視、眼睛有病變，或者瞳孔的特征有差異。當(dāng)我們遇到這種特征時(shí)，我們就要把數(shù)據(jù)搜集起來(lái)，所以在我們公司數(shù)據(jù)也是很關(guān)鍵的一個(gè)因素。同時(shí)在相關(guān)知識(shí)方面，我們需要具備與眼球結(jié)構(gòu)相關(guān)的生物學(xué)知識(shí)，將其作為技術(shù)研發(fā)的基礎(chǔ)，比如說(shuō)眼球的參數(shù)，你需要給它建模，你還需要對(duì)相關(guān)的光學(xué)原理非常熟悉。眼球追蹤技術(shù)是復(fù)合性學(xué)科應(yīng)用，所以我們公司有光學(xué)工程師、數(shù)學(xué)和計(jì)算機(jī)視覺(jué)專業(yè)的博士，還有認(rèn)知神經(jīng)學(xué)的專業(yè)人員，我們公司雖然人不算太多，但博士確實(shí)不少。“

目前我們把眼動(dòng)追蹤技術(shù)主要用在三個(gè)領(lǐng)域

了解了眼球追蹤技術(shù)確實(shí)是一種黑科技，我又問(wèn)了問(wèn)彭總，這種黑科技主要應(yīng)用的領(lǐng)域都是什么。彭凡告訴我，目前七鑫易維主要有三個(gè)領(lǐng)域的系列產(chǎn)品。“第一個(gè)領(lǐng)域是醫(yī)療康復(fù)，我們開(kāi)發(fā)了全能眼溝通輔具，主要幫助類似漸凍人、高位截癱這樣的病人用眼睛打字上網(wǎng)溝通。其實(shí)這樣的產(chǎn)品在未來(lái)會(huì)有更大的延展性，除了給殘疾人使用還可以應(yīng)用在養(yǎng)老看護(hù)領(lǐng)域，現(xiàn)在病房里有些病人不方便按鈴，那么病人通過(guò)一個(gè)眼神，就可以借助眼球追蹤技術(shù)叫護(hù)士過(guò)來(lái)查看他的情況。”

“我們第二個(gè)業(yè)務(wù)是眼動(dòng)分析系列，可以應(yīng)用在廣告行業(yè)、高校心理研究和互聯(lián)網(wǎng)的UED（用戶體驗(yàn)研究）部門(mén)，這些領(lǐng)域的客戶經(jīng)常購(gòu)買我們的眼動(dòng)儀。這種設(shè)備可以非常精準(zhǔn)的記錄用戶的眼球動(dòng)作，比如說(shuō)用戶瀏覽畫(huà)面的順序和熱力圖，然后通過(guò)專業(yè)分析工具分析出用戶在瀏覽一個(gè)內(nèi)容時(shí)會(huì)關(guān)注哪里，哪些元素會(huì)吸引他，他會(huì)漏掉哪些元素，這些分析在廣告設(shè)計(jì)、心理研究的性格分析包括教育領(lǐng)域的閱讀習(xí)慣培養(yǎng)等方面都可以發(fā)揮重要作用。最近我們也在跟自閉癥治療機(jī)構(gòu)合作，看看我們的技術(shù)能不能在自閉癥的檢測(cè)和康復(fù)過(guò)程中發(fā)揮作用。在這些方面，我們的產(chǎn)品其實(shí)就是一個(gè)眼動(dòng)分析科學(xué)研究工具，它在全球范圍內(nèi)都有很廣泛的應(yīng)用。”

“第三個(gè)領(lǐng)域就是我們現(xiàn)在最火的VR/AR，我們?cè)诳纱┐髟O(shè)備中通過(guò)眼球追蹤，獲取用戶眼睛注視點(diǎn)的位置，包括交互，這也是目前行業(yè)最急需的應(yīng)用?？傮w來(lái)說(shuō)我們的技術(shù)主要有這三大領(lǐng)域的應(yīng)用，明后年我們可能還有一個(gè)新的應(yīng)用領(lǐng)域就是智能汽車和智能駕駛。在這個(gè)領(lǐng)域我們希望能夠通過(guò)眼球追蹤檢測(cè)到司機(jī)的狀態(tài)，比如說(shuō)疲勞駕駛，或者是注意力不集中（比如玩手機(jī)）。目前全球還沒(méi)有哪一家公司把眼球追蹤與智能駕駛進(jìn)行很好的結(jié)合，而我們目前也正在進(jìn)行這方面的嘗試。”

我們希望能把眼動(dòng)追蹤技術(shù)內(nèi)置在VR設(shè)備里

在眼球追蹤與VR/AR結(jié)合的這個(gè)話題上，彭凡簡(jiǎn)單介紹了一下七鑫易維在這方面的發(fā)展歷程。2012年谷歌推出谷歌眼鏡，當(dāng)時(shí)七鑫易維的主要業(yè)務(wù)還集中在醫(yī)療輔具方面。其實(shí)之前團(tuán)隊(duì)就有一個(gè)構(gòu)想，那就是未來(lái)的計(jì)算機(jī)設(shè)備能不能成為一個(gè)可穿戴設(shè)備，如果是類似于眼鏡的產(chǎn)品，那么眼球追蹤就是一個(gè)很好的交互手段，而谷歌眼鏡也算是對(duì)于團(tuán)隊(duì)構(gòu)想的一個(gè)證明。2013年Oculus開(kāi)始眾籌，2014年被Facebook收購(gòu)，團(tuán)隊(duì)產(chǎn)生了一個(gè)很強(qiáng)烈的預(yù)感，那就是頭戴式設(shè)備一定會(huì)火。

“當(dāng)時(shí)我們就在思考，如果頭戴式設(shè)備能夠與智能手機(jī)并駕齊驅(qū)，甚至是替代智能手機(jī)，那么眼球追蹤能不能成為核心的交互技術(shù)，或者說(shuō)在其中發(fā)揮非常重要的作用？如果可能的話，七鑫易維能不能成為這項(xiàng)技術(shù)在全球的供應(yīng)商？從那時(shí)起，我們的思路就很清晰，我們首先要把其中最難的技術(shù)難題解決了，然后在行業(yè)爆發(fā)的時(shí)候爭(zhēng)取脫穎而出，因此我們的技術(shù)研發(fā)一直在持續(xù)進(jìn)行。”彭凡告訴我，相對(duì)于遠(yuǎn)距離的眼球追蹤，對(duì)應(yīng)VR頭顯的眼動(dòng)有著更多技術(shù)難題。舉例來(lái)說(shuō)，用戶每一次戴上和摘掉VR頭顯，其佩戴的位置不會(huì)精準(zhǔn)的固定在一個(gè)位置上，傳感器和眼球的相對(duì)位置不固定，這就需要通過(guò)算法來(lái)保持一定的冗余性。“研發(fā)VR眼動(dòng)的技術(shù)確實(shí)很難，我們大概有一兩年時(shí)間完全是在實(shí)驗(yàn)室里進(jìn)行摸索，去年我們才真正能夠拿出來(lái)做demo，今年我們能夠量產(chǎn)了，明年我們爭(zhēng)取能與VR硬件廠商達(dá)成合作，讓他們把我們的技術(shù)內(nèi)置在頭顯設(shè)備里，這就相當(dāng)于筆記本電腦內(nèi)置鍵盤(pán)鼠標(biāo)、智能手機(jī)內(nèi)置觸摸屏一樣。”

使用眼球追蹤技術(shù)，對(duì)于VR設(shè)備有著諸多裨益。彭凡給我介紹了其中的一種叫做“注視點(diǎn)渲染”的技術(shù)。這項(xiàng)技術(shù)的關(guān)鍵點(diǎn)在于，系統(tǒng)會(huì)基于用戶的注視點(diǎn)來(lái)做局部渲染，而用戶注視點(diǎn)的獲取是有賴于眼球追蹤技術(shù)的。“我們可以把眼球追蹤注視點(diǎn)的數(shù)據(jù)提取得非常精準(zhǔn)，同時(shí)響應(yīng)速度也非?？欤缓笪覀儼堰@個(gè)數(shù)據(jù)傳遞到英偉達(dá)的顯卡上，顯卡獲得這個(gè)數(shù)據(jù)之后就可以做局部渲染了，這是我們與英偉達(dá)達(dá)成的合作。同時(shí)我們與51VR、指揮家這樣的CP團(tuán)隊(duì)也有合作，他們只需要把我們的眼動(dòng)模組裝到VR頭顯里，然后他們就可以基于英偉達(dá)提供的軟件接口開(kāi)發(fā)支持注視點(diǎn)渲染的游戲或應(yīng)用。注視點(diǎn)渲染只會(huì)集中渲染用戶注視的區(qū)域，這樣可以極大提升渲染效率，降低渲染計(jì)算量。我們做過(guò)一個(gè)測(cè)試，在不同的環(huán)境下渲染數(shù)據(jù)量能減少3-9倍，比如說(shuō)我們一個(gè)虛擬看房的場(chǎng)景計(jì)算量?jī)?yōu)化了70%，提升了7倍的渲染效率。過(guò)去這種大數(shù)據(jù)渲染對(duì)于CP團(tuán)隊(duì)來(lái)說(shuō)成本很高，現(xiàn)在我們有效降低了渲染計(jì)算量，降低了CP團(tuán)隊(duì)的開(kāi)發(fā)成本，也降低了用戶的使用成本。”

本次眾籌我們主要面向開(kāi)發(fā)者

對(duì)于前不久發(fā)布的VR眼球追蹤模組aGlass，七鑫易維也開(kāi)啟了眾籌，我也詢問(wèn)了一下彭總本次眾籌的情況。彭凡表示，本次眾籌的量很小，主要面向開(kāi)發(fā)者。“這次我們只拿出了500套出來(lái)放到眾籌上，我們是想先讓開(kāi)發(fā)者試用一下，看看他們的反饋。其實(shí)我們的模組可以應(yīng)用在很多領(lǐng)域，比如說(shuō)游戲、影視、旅游、教育和醫(yī)療等等，因?yàn)檫@些領(lǐng)域的開(kāi)發(fā)者都很關(guān)心用戶的數(shù)據(jù)，還有渲染數(shù)據(jù)量的問(wèn)題，特別是像游戲這樣需要注視點(diǎn)渲染的領(lǐng)域。同時(shí)，我們也在思考像FPS這樣的游戲，能不能用眼球?qū)崿F(xiàn)一個(gè)鎖定敵人的功能，這就會(huì)很有意思了，你就可以體驗(yàn)未來(lái)戰(zhàn)斗機(jī)駕駛員的感覺(jué)了。開(kāi)發(fā)者的想象力很豐富，當(dāng)他們獲得開(kāi)發(fā)工具的時(shí)候，他們會(huì)想象出很多好玩的東西，對(duì)此我們非常期待。我們明年會(huì)有更多支持開(kāi)發(fā)者的行動(dòng)，比如說(shuō)舉辦一些比賽和活動(dòng)，我們也希望把這項(xiàng)技術(shù)更多應(yīng)用在內(nèi)容層面。”

我們的愿景就是“讓世界讀懂你的眼神“

按照慣例，我最后依舊問(wèn)了問(wèn)彭總這位七鑫易維的聯(lián)合創(chuàng)始人對(duì)公司的愿景。彭凡說(shuō)：“其實(shí)我們的口號(hào)里就隱含了我們的愿景，那就是讓世界讀懂你的眼神。我們認(rèn)為眼球追蹤技術(shù)在未來(lái)會(huì)成為一項(xiàng)最為普及的基礎(chǔ)交互技術(shù)，應(yīng)用在VR、手機(jī)、智能汽車等多個(gè)領(lǐng)域。而我們還是會(huì)堅(jiān)持作為這項(xiàng)技術(shù)的一個(gè)解決方案的提供方，在這方面有點(diǎn)類似于我們的投資方高通，他們并不會(huì)做一款具體的手機(jī)，但每一款手機(jī)都會(huì)采用他們的技術(shù)。因此，我們會(huì)一直堅(jiān)持著我們的愿景，把眼動(dòng)技術(shù)應(yīng)用到人們生活的方方面面。”

【913VR原創(chuàng)內(nèi)容，轉(zhuǎn)載請(qǐng)注明及回鏈】