近日,一項(xiàng)關(guān)于新型Magic Mouse的專利浮出水面,這項(xiàng)專利預(yù)示著蘋果將為Mac用戶帶來前所未有的交互體驗(yàn)——未來的Magic Mouse不再局限于表面觸控,而是將交互區(qū)域延伸至附近的桌面空間,開啟全新的手勢操控時(shí)代。?
回顧Magic Mouse的發(fā)展歷程,自2009年問世以來,它便憑借多點(diǎn)觸控手勢功能驚艷眾人。此后,Magic Mouse歷經(jīng)多次迭代升級,每一次設(shè)計(jì)革新都引發(fā)行業(yè)關(guān)注。此前,關(guān)于Magic Mouse重新設(shè)計(jì)的傳言不絕于耳,焦點(diǎn)大多集中在底部USB-C充電接口這一細(xì)節(jié)上,仿佛蘋果在Magic Mouse的創(chuàng)新之路上已陷入瓶頸,鮮少有人料到蘋果竟在手勢交互技術(shù)上醞釀著巨大突破。而新近獲得專利的 “具有擴(kuò)展輸入輸出功能的電子設(shè)備”,徹底打破了外界的固有認(rèn)知,揭示了蘋果在鼠標(biāo)交互技術(shù)領(lǐng)域的全新探索方向。?
根據(jù)專利描述,未來Magic Mouse將在外殼側(cè)壁配備一系列先進(jìn)傳感器。其中,基于光源(如發(fā)光二極管或激光器)和光探測器的光學(xué)傳感器,能夠精準(zhǔn)捕捉用戶手指在鼠標(biāo)橫向相鄰區(qū)域的位置信息;電容式傳感器則可收集該區(qū)域內(nèi)用戶手指的輸入數(shù)據(jù),二者協(xié)同工作,使用戶得以實(shí)現(xiàn)三維手勢操作。用戶只需在電子設(shè)備附近的空中輕揮手指或手掌,就能輕松完成各種指令,這種交互方式徹底擺脫了傳統(tǒng)鼠標(biāo)表面操作的束縛,為用戶帶來更自由、更直觀的操控體驗(yàn)。?

這一創(chuàng)新技術(shù)的應(yīng)用前景十分廣闊,尤其對于Apple Vision Pro而言,新型Magic Mouse的手勢檢測功能或?qū)⒊蔀樘嵘脩趔w驗(yàn)的關(guān)鍵。專利中還提到,為進(jìn)一步增強(qiáng)手勢檢測的準(zhǔn)確性和多樣性,可配備“一個(gè)或多個(gè)可見光攝像頭和/或一個(gè)或多個(gè)紅外攝像頭”。此外,鼠標(biāo)或其他設(shè)備還可能集成投影儀,能夠?qū)摂M按鍵、文件夾圖標(biāo)、字母數(shù)字鍵、菜單選項(xiàng)等豐富視覺元素的圖像投射到桌面等表面。用戶只需點(diǎn)擊投影圖像,鼠標(biāo)內(nèi)置的攝像頭便會迅速記錄操作位置,并精準(zhǔn)推斷出用戶想要控制的投射按鈕,實(shí)現(xiàn) “無實(shí)體界面” 的交互操作。
這種技術(shù)類似于激光投影鍵盤,卻又在此基礎(chǔ)上實(shí)現(xiàn)了更復(fù)雜、更智能的交互功能,讓人不禁聯(lián)想到未來MacBook Pro或許也能通過投影技術(shù),在桌面上呈現(xiàn)出虛擬的鍵盤或鼠標(biāo)操作區(qū)域,為用戶帶來全新的使用體驗(yàn)。專利中的相關(guān)插圖雖然仍保留了常規(guī)鍵盤和觸控板,但已足以讓人窺見未來交互設(shè)計(jì)的無限可能。?
值得注意的是,蘋果的這項(xiàng)專利不僅著眼于Magic Mouse本身,還展現(xiàn)了強(qiáng)大的技術(shù)拓展性。與以往專利一樣,該專利通過列舉多種設(shè)備類型,預(yù)測了技術(shù)的廣泛應(yīng)用場景。除了傳統(tǒng)的鼠標(biāo),觸控板、筆記本電腦、計(jì)算機(jī)顯示器、平板電腦、蜂窩電話、媒體播放器、手表、吊墜、耳機(jī)等十余種設(shè)備均被納入技術(shù)適用范圍。甚至連嵌入在桌子、椅子、書桌等家具中的電子設(shè)備,都有可能應(yīng)用這項(xiàng)創(chuàng)新技術(shù)。
試想一下,未來用戶只需在鼠標(biāo)旁輕輕敲擊手指,就能快速啟動(dòng)快捷方式;將咖啡杯放置在特定位置,Mac便能自動(dòng)開啟;在桌面上張開手指,設(shè)備即可執(zhí)行捏合和縮放操作。不過,蘋果似乎并不打算讓用戶完全依賴手勢操作,而是希望通過這項(xiàng)技術(shù)補(bǔ)充其他輸入方式。設(shè)備能夠?qū)崟r(shí)確定用戶手指或身體部位在空中的移動(dòng)軌跡,這些額外的用戶輸入將與按鈕、觸摸傳感器、運(yùn)動(dòng)傳感器收集的信息相互補(bǔ)充,共同擴(kuò)展設(shè)備的輸入功能。用戶既可以通過手勢操縱屏幕上的圖標(biāo)等視覺對象、輸入文本、進(jìn)行菜單選擇,還能以更多樣化的方式操作系統(tǒng)設(shè)備。
例如,在參與線上拍賣時(shí),用戶點(diǎn)擊 “出價(jià)” 按鈕后,只需揮手即可表示愿意出的價(jià)格;日常使用中,在鼠標(biāo)附近輕輕揮動(dòng)手腕,光標(biāo)便能在Mac屏幕上靈活移動(dòng);簡單的拍打動(dòng)作,或許就能讓Mac自動(dòng)點(diǎn)擊高亮顯示的復(fù)選框。
蘋果推出空間計(jì)算品牌“Apple Vision Pro”后,谷歌、高通和三星正加緊合作,為基于Android的操作系統(tǒng)以及先進(jìn)的芯片和硬件構(gòu)建全新生態(tài)系統(tǒng),旨在與Vision Pro競爭。
在6月下旬,谷歌關(guān)閉了“Iris”智能眼鏡團(tuán)隊(duì),以避免與下一代Android XR頭顯項(xiàng)目沖突。
但這并不意味著“Iris”項(xiàng)目相關(guān)知識產(chǎn)權(quán)就消失無影無蹤。谷歌要么將其XR/VR相關(guān)專利出售給合作伙伴,要么將開發(fā)概念轉(zhuǎn)化為尚未宣布的HMD XR/VR操作系統(tǒng)的功能,該操作系統(tǒng)計(jì)劃于2024年某個(gè)時(shí)候浮出水面。
Vision Pro的殺手級功能之一是使用簡單的手勢來控制VisionOS各個(gè)方面。頭顯底部區(qū)域內(nèi)置的攝像頭能讀取特定用戶的手勢,以移動(dòng)對象、滾動(dòng)網(wǎng)頁、點(diǎn)擊圖標(biāo)打開應(yīng)用等,如下部分所述。

如果將這種類型的功能應(yīng)用到智能眼鏡上,那么智能眼鏡集成攝像頭就會變得過于笨重,因此谷歌工程團(tuán)隊(duì)決定使用“Soli”雷達(dá)技術(shù)來幫助用戶。用戶的手勢將由智能手表理解,然后智能手表向智能眼鏡操作系統(tǒng)發(fā)送信號/命令,以實(shí)現(xiàn)與智能眼鏡操作系統(tǒng)的交互,例如單擊圖標(biāo)打開應(yīng)用程序、滾動(dòng)網(wǎng)頁等。

谷歌專利圖1為說明涉及AR系統(tǒng)用戶使用腕帶來檢測手腕小肌肉運(yùn)動(dòng)的示例場景圖;圖1B為示出與人類手腕交互的FMCW雷達(dá)的示例配置圖。