?? 由 文心大模型 生成的文章摘要
據(jù)消息人士稱,蘋果公司的VR頭顯將會(huì)搭載單眼8K分辨率的屏幕和眼球追蹤功能。從前一日2月3日(美國東部時(shí)間)蘋果傳出造車的市場(chǎng)情緒來對(duì)比今日2月4日蘋果推出VR頭顯的市場(chǎng)情緒來看,明顯對(duì)于下一代消費(fèi)VR更樂觀。

蘋果在眼球追蹤技術(shù)已歷經(jīng)多年實(shí)驗(yàn)部署
蘋果的AR手機(jī)、AR眼鏡戰(zhàn)役始于2014年,歷經(jīng)3年并購,于2017年推出軟件ARKit(AR SDK)2018、2019年,iOS10以上的手機(jī)變身AR手機(jī)。同年蘋果公司收購德國眼球追蹤公司SensoMotoric Instruments(簡(jiǎn)稱SMI),針對(duì)眼球追蹤在手機(jī)、AR眼鏡的應(yīng)用進(jìn)行開發(fā)探索。
根據(jù)PatSnap統(tǒng)計(jì),近年來申請(qǐng)人為SMI&APPLE在眼球追蹤領(lǐng)域的申請(qǐng)了27組同族專利,涉及用戶與計(jì)算機(jī)之間交互層面,確定和記錄眼球運(yùn)動(dòng)層面,顯示器、光學(xué)系統(tǒng)層面等等,涵蓋了眼球追蹤技術(shù)和應(yīng)用方向。其專利數(shù)量公布在2019年和2020年呈爆發(fā)性提升,可以見得蘋果公司近兩年在眼球追蹤技術(shù)和硬件結(jié)合使用上的經(jīng)有更大的進(jìn)步成果。

眼球追蹤技術(shù)在智能硬件中的重要表現(xiàn)
雖然目前眼動(dòng)追蹤至今還沒有進(jìn)入主流的公眾視野,但是眼動(dòng)追蹤技術(shù)對(duì)于智能眼鏡走進(jìn)消費(fèi)者視野卻有著不可忽視重要意義。
目前此款消費(fèi)級(jí)的VR設(shè)備會(huì)高到3000美金。為了滿足搭載超高分辨率的單目8K(雙目16K)屏幕的性能要求,眼球追蹤功能是必不可少的。
眾所周知,VR對(duì)屏幕渲染的要求很高,目前全球主流VR頭顯的分辨率配置是雙目4K,要達(dá)到雙目16K分辨率,GPU的渲染壓力大幅度提升,即使是蘋果這種具有高性能芯片的公司,仍然無法靠芯片本身的能力完成渲染,所以蘋果公司采用了“注視點(diǎn)渲染”技術(shù),即通過眼球追蹤判斷用戶注視屏幕的位置,只對(duì)用戶注視點(diǎn)小范圍的顯示進(jìn)行高清渲染,外圍則進(jìn)行低分辨率的渲染,這樣可以降低對(duì)GPU芯片的壓力,降低渲染延遲,提升幀率,降低用戶的眩暈感,提升用戶體驗(yàn)。
近日,蘋果又曝光了一份新專利稱,蘋果眼鏡可能會(huì)采用眼球追蹤技術(shù),追蹤瞳孔縮放和眼睛視線,評(píng)估用戶觀看內(nèi)容時(shí)的特定類型生理反應(yīng)。蘋果公司希望用戶可以較長(zhǎng)時(shí)間的佩戴VR產(chǎn)品,以上專利表明,眼球追蹤技術(shù)可以根據(jù)用戶的眼動(dòng)數(shù)據(jù),判斷當(dāng)前用戶的疲勞情況和注意力情況,從而調(diào)節(jié)屏幕亮度,提供更加舒適的觀看體驗(yàn),或者在顯示內(nèi)容上提供替代內(nèi)容或建議,例如,提示用戶休息一下,來改善用戶的體驗(yàn)和理解力。

從蘋果布局的專利可以看出眼球追蹤對(duì)于提升VR用戶的使用體驗(yàn)起到非常重要的作用,除了專利中提到的對(duì)疲勞度和注意力的提升外,眼動(dòng)數(shù)據(jù)還可以用于更多的商業(yè)用途和醫(yī)療用途,如用戶的消費(fèi)心理分析、認(rèn)知障礙分析等,不排除蘋果公司會(huì)將眼球追蹤用于這些用途,但是蘋果公司一向重視用戶隱私,這些用途肯定是在經(jīng)過用戶允許的情況下安全使用的。
全球領(lǐng)頭硬件廠商積極布局眼球追蹤技術(shù)
基于眼球追蹤技術(shù)在AR/VR發(fā)展中的獨(dú)特意義,各大消費(fèi)電子領(lǐng)頭廠商在籌備進(jìn)軍虛擬現(xiàn)實(shí)設(shè)備研發(fā)的同時(shí),也在開始部署眼球追蹤技術(shù)在硬件上的結(jié)合與應(yīng)用:
2014年末,三星投資了FOVE,主打眼球追蹤的VR頭盔;
2016年10月,Google收購專注于眼球追蹤的初創(chuàng)公司Eyefluence,進(jìn)攻AR交互;
2017年初Facebook旗下Oculus確認(rèn)收購The Eye Tribe,用眼球追蹤技術(shù)改善產(chǎn)品;
2017年6月,蘋果公司收購了德國計(jì)算機(jī)視覺公司SensoMotoric Instruments(SMI),打造蘋果AR眼鏡;
2018年,NVIDIA為了提升GPU在VR應(yīng)用中的性能,在其Turing架構(gòu)GPU中推出了支持注視點(diǎn)渲染的VRS(可變速率著色, Variable Rate Shading) 功能,七鑫易維多年來一直與NVIDIA合作推進(jìn)該功能的實(shí)現(xiàn);
2018年,Qualcomm為了更好的支持VR一體機(jī),在Snapdragon 845和之后的升級(jí)型號(hào)中推出了Eye-Tracking Framework,目前全球只有兩家企業(yè)完成了與高通在該功能上的集成合作,七鑫易維便是其一。
面臨重量級(jí)智能設(shè)備廠商通過收購眼球追蹤技術(shù)企業(yè),來獲得技術(shù)研究的主動(dòng)權(quán),輕量級(jí)企業(yè)又該如何選擇未來?
小派作為全球VR頭顯中更容易被消費(fèi)者接受的廠商之一,和蘋果公司類似,追求更高的分辨率,采用了單眼8K分辨率,對(duì)屏幕渲染能力提出了很高的要求,一般的PC顯卡無法滿足需求,很容易會(huì)造成VR顯示的渲染延遲和幀率的大幅度下降。為了解決這個(gè)問題,從2018年開始,小派就和國內(nèi)眼球追蹤技術(shù)公司七鑫易維合作開發(fā)眼球追蹤產(chǎn)品,并于2020年上市實(shí)現(xiàn)“注視點(diǎn)渲染”功能,獲得國內(nèi)外玩家的一致好評(píng),由此看來選擇強(qiáng)強(qiáng)合作也是一種往前邁進(jìn)的好方式。

追隨領(lǐng)頭企業(yè)的關(guān)注動(dòng)態(tài)進(jìn)程,我們不難發(fā)現(xiàn)AR/VR的未來,是離不開眼球追蹤技術(shù)作為支持,蘋果作為硬件行業(yè)的風(fēng)向標(biāo),這次舉動(dòng)更是敲定了眼球追蹤在虛擬現(xiàn)實(shí)頭顯中的重要地位??梢哉f這不僅僅是AR/VR頭顯的浪潮時(shí)代,更是眼球追蹤技術(shù)的浪潮時(shí)代。








