通過聲納進行眼動追蹤,研究人員旨在使VR頭顯更加高效

?? 由 文心大模型 生成的文章摘要

美國紐約康奈爾大學研究人員開發(fā)了一種類似聲納技術的原型,可以取代攝像頭來追蹤眼球運動。該原型基于微型揚聲器,可發(fā)出頻率高于18 kHz的聲音,這超出了大多數(shù)人的聽力范圍。

聲音反射用戶臉部、并由頭顯兩側的四個麥克風接收,研究人員使用一種稱為GazeTrak的算法來解讀聲波,以確定頭顯用戶注視方向。

研究團隊表示,聲納技術具有以下幾大優(yōu)點:與基于攝像頭的系統(tǒng)相比,可以降低功耗,并且由于攝像頭不會持續(xù)記錄,具備更好的隱私性,且還能降低VR頭顯的制造成本和重量。

在對20名參與者測試時,基于聲納技術的眼動追蹤顯示準確度高達3.6度,盡管不如當前的高端設備(例如Apple Vision Pro)準確,不過,研究人員認為這種性能對于大多數(shù)虛擬現(xiàn)實應用來說應該足夠。

然而,該系統(tǒng)有一個主要缺點:由于每個人的眼球形狀不同,GazeTrak使用的AI模型必須針對每個用戶單獨進行訓練。為了將眼球追蹤聲納商業(yè)化,必須收集足夠的數(shù)據(jù)來創(chuàng)建通用模型。

眼動追蹤是虛擬現(xiàn)實的一項關鍵技術,支持用戶通過查看特定點來導航菜單或與虛擬環(huán)境中的其他化身進行眼神交流,Vision Pro便能基于精確的眼動追蹤以改善用戶體驗。

眼動追蹤還支持呈現(xiàn)正在查看的區(qū)域詳細表示和外圍不太詳細的表示(注視點渲染)來實現(xiàn)用戶焦點的渲染。該技術還支持創(chuàng)新的控制方法,例如 VR游戲「Before Your Eyes」,玩家只需用眼睛即可操控。

雖然眼動追蹤具備以上優(yōu)勢,但是市場領導者Meta仍決定不在Meta Quest3上應用該技術,理由是制造成本、重量和所需的計算力。到目前為止,Meta僅在Quest Pro中采用了眼動追蹤。

而Meta首席技術官博斯沃思相信,眼動追蹤終有一天會成為標準:“作為與雙手結合的2D導航UI范式,我們確實對眼動追蹤技術進行了很長時間的測試,這是制造成本、重量和所需計算力之間的權衡,我們專注于能夠在更高效的架構中以高精度提供這項功能,這樣就可以將眼動追蹤應用于每一臺頭顯?!?/p>

「93913原創(chuàng)內(nèi)容,轉載請注明出處」