谷歌向由三星、谷歌和高通組成的XR聯(lián)盟提交了一項(xiàng)極具前瞻性的國際專利，該專利預(yù)計(jì)將在未來智能眼鏡及XR頭顯產(chǎn)品中得到廣泛應(yīng)用。其核心技術(shù)聚焦于“虛擬注釋表面”，這是一種能夠懸浮于空中、獨(dú)立于實(shí)體顯示器及其他物體存在的交互界面，用戶可在其上自由進(jìn)行注釋、繪圖與書寫等操作。?

該專利系統(tǒng)中，注釋表面或配套計(jì)算設(shè)備內(nèi)置先進(jìn)的動(dòng)作捕捉模塊，能夠精準(zhǔn)監(jiān)控用戶的手部運(yùn)動(dòng)狀態(tài)。這一監(jiān)控過程涵蓋兩大關(guān)鍵維度：其一，通過傳感器與算法結(jié)合，判斷用戶是否做出特定手勢；其二，實(shí)時(shí)追蹤手部在三維空間中的具體位置坐標(biāo)，為后續(xù)交互提供數(shù)據(jù)基礎(chǔ)。?

負(fù)責(zé)手部動(dòng)作監(jiān)測的計(jì)算設(shè)備，會依據(jù)一系列嚴(yán)謹(jǐn)?shù)呐卸l件，來確認(rèn)用戶是否正在虛擬注釋表面上進(jìn)行書寫操作。具體而言，該設(shè)備會綜合分析用戶手部與虛擬注釋表面的空間位置關(guān)系（是否處于表面之上，或保持在設(shè)定的閾值距離范圍內(nèi)），同時(shí)結(jié)合用戶手部是否執(zhí)行了預(yù)先設(shè)定的書寫手勢，從而做出精準(zhǔn)判斷。
?
在虛擬注釋表面書寫面臨的一大技術(shù)難題，在于觸覺反饋缺失。舉例來說，當(dāng)用戶在覆蓋于實(shí)體桌面的虛擬表面書寫時(shí)，能夠通過手部與桌面的接觸獲得觸感反饋；然而，在缺乏實(shí)體支撐物的情況下，用戶難以感知與虛擬注釋表面的交互接觸，這使得用戶難以準(zhǔn)確判斷手部是否處于正確的書寫位置，嚴(yán)重影響書寫操作的流暢性與準(zhǔn)確性。
?
針對上述技術(shù)痛點(diǎn)，專利中提出了一套完整的解決方案：一旦計(jì)算設(shè)備判定用戶正在虛擬注釋表面書寫，便會立即向用戶輸出相應(yīng)反饋。當(dāng)用戶手部抵達(dá)虛擬注釋表面或接近至閾值距離時(shí)，計(jì)算設(shè)備會觸發(fā)多種反饋機(jī)制，例如向佩戴于用戶手臂、手腕或手部的可穿戴設(shè)備發(fā)送指令，使其產(chǎn)生振動(dòng)等觸覺反饋，以明確告知用戶當(dāng)前處于書寫狀態(tài)。
?
與此同時(shí)，計(jì)算設(shè)備還將利用顯示技術(shù)，在與虛擬注釋表面存在特定偏移的顯示器上，實(shí)時(shí)呈現(xiàn)虛擬筆畫，這些筆畫將精準(zhǔn)復(fù)現(xiàn)用戶在虛擬注釋表面的書寫軌跡，為用戶提供可視化的書寫反饋。?

這套輸出與反饋技術(shù)方案具備顯著的技術(shù)優(yōu)勢：一方面，通過多模態(tài)反饋（觸覺與視覺結(jié)合），幫助用戶快速且準(zhǔn)確地確認(rèn)手部位置，大幅提升書寫操作的易用性；另一方面，突破了對實(shí)體支撐物的依賴，使得計(jì)算設(shè)備能夠在用戶周圍任意空間生成虛擬注釋表面，極大拓展了交互場景的可能性，為未來XR設(shè)備的交互體驗(yàn)革新奠定了堅(jiān)實(shí)基礎(chǔ)。