眼球追蹤在5G+XR場(chǎng)景中的新趨勢(shì):專訪七鑫易維XR業(yè)務(wù)部總經(jīng)理路偉成

?? 由 文心大模型 生成的文章摘要
在春意盎然的4月,我來(lái)到七鑫易維在北京的新辦公室,采訪了七鑫易維XR業(yè)務(wù)部總經(jīng)理路偉成。作為國(guó)內(nèi)眼球追蹤技術(shù)的領(lǐng)軍企業(yè),七鑫易維不僅在今年CES期間亮相了多款VR/AR眼球追蹤集成與配件解決方案,而且還攜手HTC、NVIDIA共同發(fā)起了“Droolon杯”眼球追蹤VR內(nèi)容開發(fā)大賽。通過(guò)此次交流,我了解到了本次大賽的來(lái)龍去脈,同時(shí)也對(duì)眼球追蹤技術(shù)在5G時(shí)代呈現(xiàn)出的一些新趨勢(shì)有了更深的理解。
面向全球開發(fā)者的眼球追蹤VR內(nèi)容開發(fā)大賽
2019年12月18日,由七鑫易維主辦、HTC協(xié)辦、NVIDIA提供技術(shù)支持的“Droolon杯”眼球追蹤VR內(nèi)容開發(fā)大賽正式啟動(dòng)。本次大賽旨在推廣眼球追蹤技術(shù)在VR領(lǐng)域的廣泛應(yīng)用,并圍繞HTC Vive系列VR頭顯(包含Cosmos、Focus Plus、Vive Pro等)以及七鑫易維眼球追蹤產(chǎn)品而展開。大賽提供了總價(jià)值60萬(wàn)元的豐厚獎(jiǎng)金獎(jiǎng)品,其報(bào)名截止日期也由原來(lái)的3月31日延至4月30日。路偉成表示,受到新冠病毒疫情影響,本次大賽的報(bào)名以及后續(xù)的評(píng)審和頒獎(jiǎng)環(huán)節(jié)有所推延。不過(guò),即使是在疫情之下,也有許多內(nèi)容團(tuán)隊(duì)報(bào)名參賽,其中涵蓋了游戲、教育、醫(yī)療等不同行業(yè)的多種應(yīng)用場(chǎng)景。與此同時(shí),得益于HTC與NVIDIA在海外地區(qū)的宣傳,一些海外的內(nèi)容團(tuán)隊(duì)也參與到本次大賽之中,進(jìn)一步提升了參賽作品的深度和廣度,對(duì)于在全球范圍里推廣眼球追蹤技術(shù)起到了非常積極的作用。
關(guān)于本次大賽的評(píng)審標(biāo)準(zhǔn),路偉成透露,大賽評(píng)委最為看重的主要有三點(diǎn)。第一點(diǎn)是實(shí)用性,評(píng)委首先關(guān)注參賽作品從哪些方面解決什么樣的行業(yè)痛點(diǎn)或問(wèn)題,任何技術(shù)普及的關(guān)鍵都在于其實(shí)用性,而徒有酷炫的噱頭則意義不大;第二點(diǎn)是新穎性,本次大賽鼓勵(lì)推動(dòng)相關(guān)行業(yè)進(jìn)步的創(chuàng)新應(yīng)用,而相對(duì)來(lái)說(shuō)“重復(fù)造輪子”的應(yīng)用并無(wú)太大價(jià)值;第三點(diǎn)是商業(yè)價(jià)值,與純粹學(xué)術(shù)性的應(yīng)用相比,在某個(gè)細(xì)分領(lǐng)域能夠產(chǎn)生較大商業(yè)價(jià)值的應(yīng)用將獲得更多青睞。除了以上最為重要的三點(diǎn),作品的美觀性、技術(shù)含量等其他因素也將被列入考察范圍。
4月30日之前,本次大賽的報(bào)名通道將繼續(xù)面對(duì)全球的開發(fā)者及內(nèi)容團(tuán)隊(duì)開放。除了豐厚的獎(jiǎng)金及獎(jiǎng)品,大賽還獲得了HTC、NVIDIA這樣的科技大廠的強(qiáng)力支持以及更多投資機(jī)構(gòu)的關(guān)注。對(duì)于希望在XR領(lǐng)域一展拳腳的創(chuàng)業(yè)團(tuán)隊(duì)來(lái)說(shuō),這絕對(duì)是一次展現(xiàn)自身實(shí)力、獲取更多資源的寶貴機(jī)遇,對(duì)此感興趣的團(tuán)隊(duì)可以關(guān)注七鑫易維的微信公眾號(hào)并報(bào)名參賽。
眼球追蹤技術(shù)在不同應(yīng)用場(chǎng)景中的新趨勢(shì)
在以往的交流中,我印象中眼球追蹤技術(shù)有著三大應(yīng)用方向:注視點(diǎn)渲染、眼動(dòng)數(shù)據(jù)分析與眼動(dòng)交互(即眼控)。這次在了解完“Droolon杯”大賽的情況之后,我還請(qǐng)路偉成分享了今年眼球追蹤技術(shù)在不同應(yīng)用場(chǎng)景中呈現(xiàn)出的一些新趨勢(shì)。
第一個(gè)新趨勢(shì)是注視點(diǎn)渲染開始真正成為一種主流應(yīng)用,而出現(xiàn)這一趨勢(shì)的原因主要在于VR頭顯的屏幕分辨率的提升。進(jìn)入2020年,4K分辨率逐漸成為VR頭顯的主流,一些高端產(chǎn)品還提供了5K及8K分辨率。隨著屏幕分辨率越來(lái)越高,VR內(nèi)容渲染的性能要求與日俱增,其結(jié)果就是即使性能較強(qiáng)的PC也會(huì)面臨很大的渲染壓力,進(jìn)而導(dǎo)致用戶使用成本的上升和使用體驗(yàn)的下降(渲染壓力可能導(dǎo)致畫面掉幀)。而對(duì)于諸如VR一體機(jī)這樣的移動(dòng)VR設(shè)備,其GPU渲染性能本來(lái)就比PC低很多,運(yùn)行優(yōu)質(zhì)、大體量VR內(nèi)容的渲染壓力自然就更大。在這種情況下,采用注視點(diǎn)渲染技術(shù)可以極大降低PC或移動(dòng)設(shè)備的渲染壓力:用戶在體驗(yàn)VR內(nèi)容時(shí),只有其注視區(qū)域被精確渲染,其余區(qū)域則被低分辨率渲染,由此在理論上可以優(yōu)化60-80%的數(shù)據(jù)量。“用戶想要獲得更好的沉浸式體驗(yàn),就需要更大的視場(chǎng)角和更高的分辨率,而在這個(gè)過(guò)程中,渲染壓力將會(huì)越來(lái)越大,而注視點(diǎn)渲染的重要性也就越來(lái)越高。”
第二個(gè)新趨勢(shì)是一些行業(yè)客戶對(duì)于虹膜識(shí)別的需求逐漸增大。隨著VR硬件及應(yīng)用在行業(yè)市場(chǎng)逐漸普及,有不少應(yīng)用場(chǎng)景都需要進(jìn)行用戶身份識(shí)別,比如在VR教育場(chǎng)景中,教學(xué)系統(tǒng)需要根據(jù)不同的學(xué)生賬號(hào)提供相應(yīng)的內(nèi)容,而在VR頭顯里最方便的身份認(rèn)證方式就是虹膜識(shí)別,用戶只需戴上VR頭顯,系統(tǒng)就能通過(guò)識(shí)別用戶的虹膜來(lái)完成其登錄操作。目前七鑫易維的眼球追蹤產(chǎn)品集成了虹膜識(shí)別功能,能夠滿足不同應(yīng)用場(chǎng)景中的用戶身份識(shí)別需求。
第三個(gè)新趨勢(shì)是眼控作為一種輔助的交互方式,將會(huì)融入到未來(lái)的自然交互方式之中。“我們看到新的自然交互方式正在逐漸取代手柄,比如Oculus Quest開始支持手勢(shì)識(shí)別,而眼動(dòng)作為指向性輸入最為合適。未來(lái)我們極有可能通過(guò)眼動(dòng)選擇對(duì)象,然后通過(guò)手勢(shì)與語(yǔ)音進(jìn)行確認(rèn)或其他操作,這種眼、手、口結(jié)合的自然交互將成為一種趨勢(shì),而眼控將作為一種輔助的交互方式發(fā)揮越來(lái)越重要的作用。”當(dāng)我問(wèn)到眼控會(huì)不會(huì)造成眼部疲勞時(shí),路偉成告訴我,這主要是一個(gè)設(shè)計(jì)問(wèn)題:如果包含選擇、確認(rèn)等操作在內(nèi)的全部交互都采用眼控,那確實(shí)會(huì)導(dǎo)致用戶眼部疲勞;但如果將眼控作為眼手口多模態(tài)自然交互的一部分,眼動(dòng)只作為指向性選擇,這種類似用戶在現(xiàn)實(shí)生活中的自然行為的交互并不會(huì)造成其眼部疲勞。
關(guān)于眼球追蹤技術(shù)與目前大熱的5G的結(jié)合點(diǎn),路偉成認(rèn)為,前面提到的注視點(diǎn)渲染對(duì)于云VR同樣適用。“5G使得云VR服務(wù)成為可能,而目前影響其普及的主要因素就是延遲,較大的延遲將造成用戶眩暈,降低其使用體驗(yàn)。在這方面,注視點(diǎn)渲染一方面可以降低云端的渲染壓力,另一方面還可以降低網(wǎng)絡(luò)傳輸?shù)臄?shù)據(jù)量,其最終結(jié)果就是延遲的降低以及用戶體驗(yàn)的提升。目前基于云VR的注視點(diǎn)渲染技術(shù)方案還處于剛剛啟動(dòng)測(cè)試的階段,我們正在與運(yùn)營(yíng)商和云服務(wù)提供商進(jìn)行探討,希望能夠共同合作,打通這條鏈路。”
基于硬件及軟件的新品布局
目前,七鑫易維已經(jīng)為HTC、愛(ài)奇藝、小派、影創(chuàng)、0glasses、Nreal等VR/AR硬件廠商的產(chǎn)品提供了相應(yīng)的眼球追蹤技術(shù)解決方案,同時(shí)還與Nreal合作推出了集成眼球追蹤功能的MR眼鏡,相關(guān)的配件及集成產(chǎn)品將于接下來(lái)的五六月份上市。
談到近期疫情的影響,路偉成表示,雖然疫情對(duì)于其硬件產(chǎn)品的生產(chǎn)以及“Droolon杯”大賽都產(chǎn)生了一定影響,但同時(shí)也催生了一些新的業(yè)務(wù)需求,比如許多公司開始定期舉行遠(yuǎn)程會(huì)議,而不少學(xué)校也開始實(shí)施大規(guī)模的遠(yuǎn)程教育。相對(duì)于采用語(yǔ)音、文字以及二維視頻圖像交流的傳統(tǒng)遠(yuǎn)程會(huì)議,最接近真實(shí)交流的就是VR會(huì)議,而眼球追蹤技術(shù)可以增加人們?cè)赩R會(huì)議中的眼神交流,進(jìn)一步提升用戶的沉浸感。此外,在遠(yuǎn)程教育中,老師不像在課堂上一樣可以實(shí)時(shí)觀察到學(xué)生的反饋,而眼球追蹤則可以彌補(bǔ)這點(diǎn)不足,無(wú)論是VR頭顯還是筆記本、平板電腦或手機(jī),眼球追蹤技術(shù)都可以采集學(xué)生的眼動(dòng)數(shù)據(jù)(比如學(xué)生是否在看屏幕),這些數(shù)據(jù)能夠及時(shí)有效的反饋教學(xué)效果,有利于遠(yuǎn)程教育教學(xué)質(zhì)量的提升。目前七鑫易維正在積極布局遠(yuǎn)程教育相關(guān)的眼球追蹤技術(shù)方案,以滿足近期已成為剛需的遠(yuǎn)程教育需求。
在新品研發(fā)上,七鑫易維正在根據(jù)市面上VR/AR硬件主體的形態(tài)變化進(jìn)行跟進(jìn),比如從去年開始出現(xiàn)的緊湊型光學(xué)方案(短焦VR眼鏡)正在逐步走向主流,而技術(shù)團(tuán)隊(duì)也相應(yīng)推出了面向緊湊型光學(xué)硬件的解決方案。除了硬件的升級(jí)迭代,七鑫易維還在軟件層面上進(jìn)行布局,推出了一系列連接硬件與內(nèi)容廠商的“中間層”產(chǎn)品,比如具備眼動(dòng)數(shù)據(jù)分析功能的插件,開發(fā)者只需在自己熟悉的開發(fā)環(huán)境中加入這類插件,就可以輕松集成采集用戶眼動(dòng)數(shù)據(jù)并進(jìn)行分析的功能,如此也相應(yīng)減輕了開發(fā)者的開發(fā)負(fù)擔(dān)。
此次與路總的交流,讓我對(duì)于眼球追蹤技術(shù)的應(yīng)用及前景獲得了更為全面的認(rèn)識(shí)。在全新的2020年代,我們看到了這項(xiàng)技術(shù)更加廣闊的市場(chǎng)空間以及對(duì)于XR產(chǎn)業(yè)的推動(dòng)作用。在此我們衷心祝愿七鑫易維能夠在相關(guān)技術(shù)快速發(fā)展的進(jìn)程中扮演越來(lái)越重要的角色,并讓眼睛這扇心靈的窗戶在未來(lái)帶給我們一個(gè)更加美麗的世界。

【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】