2022年1月，七鑫易維聯(lián)合杭州靈伴科技有限公司（Rokid），在AR眼球追蹤方面進(jìn)行深度合作。

Rokid在AR領(lǐng)域深耕了7年，為不同垂直領(lǐng)域的客戶提供全棧式解決方案，有效提升用戶體驗、助力企業(yè)增效，其Al、AR產(chǎn)品已在全球七十余個國家和地區(qū)投入使用，取得了矚目的成就。七鑫易維則一直專注于眼球追蹤技術(shù)，并在很早就推出了XR眼球追蹤解決方案。本次與Rokid工業(yè)AR合作，是應(yīng)工業(yè)企業(yè)的需求，將在很多落地的場景中進(jìn)行應(yīng)用。

1、解放雙手，眼動與語音的自然交互

在工業(yè)中，有大量場景工人的雙手是被占用的，在這種情況下，AR眼鏡的交互會成為一個問題。Rokid在語音交互領(lǐng)域有成熟的應(yīng)用和深厚的技術(shù)沉淀。語音交互行業(yè)目前存在的問題是需要識別解析大量的語音詞匯，用于不同UI元素的交互，識別量大；二是不同地區(qū)用戶發(fā)音不同，比如方言等，會造成識別的困難；三是有些場合需要安靜，或者避免相互干擾，語音則不是很方便使用。

基于這些行業(yè)應(yīng)用痛點，七鑫易維和Rokid把眼球追蹤和語音技術(shù)進(jìn)行融匯。注視點可以進(jìn)行UI元素的選擇，語音則可以用于觸發(fā)確認(rèn)。只需要識別“確認(rèn)”等少量詞匯即可實現(xiàn)交互，既能夠避免大量語音詞匯的識別，也可以避免眼球追蹤進(jìn)行交互控制產(chǎn)生的“米達(dá)斯接觸”問題，取長補(bǔ)短，使工業(yè)用戶能夠在流暢交互的情況下解放雙手。

2、虛擬相融，保障數(shù)字孿生的可靠性

工業(yè)AR中，有大量需要虛實相融的場景，將虛擬信息疊加在物理設(shè)備上，這就需要虛擬場景可以和物理設(shè)備有很好的貼合，如果位置發(fā)生偏移，則可能造成識別和操作上的失誤。

用戶佩戴AR眼鏡時，其位置并不是標(biāo)準(zhǔn)確定的位置，即使是同一個人，在佩戴過程中，也很容易發(fā)生滑動或偏斜。

為了解決這個問題，需要AR眼鏡實時感知用戶佩戴時顯示區(qū)域與眼球的相對位置，根據(jù)用戶眼球位置，將虛擬信息的正確位置計算出來，渲染到顯示器，以保證虛擬數(shù)據(jù)和物理設(shè)備可以相融，不產(chǎn)生任何偏移。這就需要眼球追蹤技術(shù)來為AR眼鏡實時提供眼球位置的數(shù)據(jù)。

3、眼動數(shù)據(jù)分析，保證工人工作質(zhì)量

在很多巡檢或檢查工作中，需要依靠視覺交互。例如在機(jī)房巡檢中，檢查任務(wù)時間緊，檢查點多，需要保證檢查人員是否按照規(guī)程嚴(yán)格執(zhí)行檢查，如果有任何遺漏，則可能造成不良后果，再如二手車質(zhì)量檢查中，也需要工人按照一定的順序和時長要求，對很多點進(jìn)行詳細(xì)檢查。

眼球追蹤的應(yīng)用，則讓這類工業(yè)場景有了客觀量化的準(zhǔn)確監(jiān)督手段。通過AR眼球追蹤，可以實時收集工人在工作過程中的眼動數(shù)據(jù)，并分析其注視點的注視順序、注視時長等數(shù)據(jù)，是否按照規(guī)定進(jìn)行，從而判斷其工作質(zhì)量，不僅可以進(jìn)行實時監(jiān)督和提醒，若出現(xiàn)問題，還可以進(jìn)行事后追溯和分析。

4、注意力監(jiān)督，保證工業(yè)生產(chǎn)無事故

在工業(yè)生產(chǎn)中，工人注意力不集中或者疲勞作業(yè)，可能會造成財產(chǎn)甚至生命的危險。

通過AR眼球追蹤技術(shù)，可實時監(jiān)督工人的注意力是否放在了關(guān)鍵位置對危險點是否存在疏忽及疲勞過度，影響了正常工作等等。通過及時提醒，讓管理者可以根據(jù)情況進(jìn)行合理調(diào)度，避免事故的發(fā)生。

本次Rokid和七鑫易維達(dá)成合作，將眼球追蹤功能深度集成到AR眼鏡中，根據(jù)應(yīng)用場景，提供相應(yīng)的技術(shù)功能支持，為廣大的工業(yè)客戶提供更優(yōu)的服務(wù)。

優(yōu)勢互補(bǔ)，強(qiáng)強(qiáng)聯(lián)合，實現(xiàn)產(chǎn)品的開發(fā)落地，同心協(xié)力共建智慧工業(yè)的到來！