蘋果全球開發(fā)者大會WWDC 23即將于明天凌晨1點如期而至。今年的主角，大概率就是即將推出的蘋果MR頭顯——「Vision Pro」了。

自23年開年以來，隨著這款設備逐漸走入量產階段，蘋果在XR產業(yè)鏈的布局不斷完善，相關的爆料和預測逐漸增多，諸多關于「Vision Pro」的細節(jié)逐漸浮出水面。此外，為了這款備受全球矚目的新產品，蘋果不僅在Apple Park建造了一個用于展示「Vision Pro」的特殊演示區(qū)域，同時也邀請了全球多家泛科技媒體與XR產業(yè)垂直媒體與前往現(xiàn)場參與今年的大會，可以說為「Vision Pro」的亮相造足了勢頭。

這款MR設備的問世之路充滿曲折，也曾在蘋果內部引起過爭議。但對于業(yè)內人士來說，用iPhone、iPad、Apple Watch、Airpods在各自領域創(chuàng)下神話的蘋果，依然是最有可能用一款獨創(chuàng)性的產品、用硬件與軟件的完美融合、用對消費者體驗的極致追求，重新定義XR產業(yè)的「領頭羊」。

相比于「Vision Pro」7年之久的研發(fā)歷程，蘋果在XR行業(yè)的布局其實還要更早一些。為了緩解大家等待的焦慮心情，我們特意梳理了蘋果在XR領域漫長的發(fā)展史，讓我們共同回顧一下這家科技巨頭在XR領域的產業(yè)布局之路，并一起期待「Vision Pro」掀開XR產業(yè)嶄新的一頁吧。

蘋果的XR發(fā)展史

一直以來，蘋果公司就表現(xiàn)出對XR技術的強烈興趣，進軍XR領域的意圖從其早年便開始收購從事XR技術相關的公司便有所體現(xiàn)。其次，盡管蘋果遲遲未發(fā)布硬件設備，但其在AR內容生態(tài)領域建設方面卻一直以來走在世界前列，蘋果于2017年推出的移動端AR開發(fā)工具集合ARKit目前已成為最大的AR平臺。此外，在蘋果公司近十年的技術研發(fā)歷程中，所發(fā)布的XR領域相關專利技術更是不勝枚舉。種種事實表明，蘋果公司作為一家世界級科技巨頭，其在XR領域的布局其實由來已久，我們梳理了其在XR領域的發(fā)展史，并希望從中窺見蘋果在XR領域的戰(zhàn)略考量。

●2010年

就在指紋識別還沒有誕生的2010年，蘋果公司就已經開始布局3D視覺技術，收購了一家名為Polar Rose的面部識別技術廠商。Polar Rose開發(fā)了大量面部識別技術，其中包括FaceCloud，可為任何服務添加面部識別；FaceLib，面向iPhone和Android平臺的移動解決方案；FaceCore，人臉識別開放平臺；Recognizr，一款整合人臉識別和增強現(xiàn)實技術的工具。上述由Polar Rose開發(fā)的人臉識別及增強現(xiàn)實技術的工具很容易整合到蘋果推出的兩款利用人臉識別技術的產品：Aperture和iPhoto中，并助力蘋果將人臉識別技術和增強現(xiàn)實技術整合到iphone、iPod Touch和MobileMe互聯(lián)網服務。

●2013年

2013年11月

蘋果以3.6億美元的價格收購了對以色列3D傳感技術公司PrimeSense。PrimeSense所開發(fā)的3D傳感器能夠讓用戶通過手勢控制計算機和其他設備，微軟的第一代Kinect體感設備上所使用的就是該公司提供的紅外線動態(tài)追蹤系統(tǒng)，不過隨后微軟就開始投入巨資自行開發(fā)手勢控制技術，并在2011年收購了一家名為Canesta的手勢控制技術廠商。

●2014年

蘋果公司收購了Micro LED顯示技術創(chuàng)業(yè)公司Luxvue，該公司專注于消費性電子產品的低功耗Micro LED顯示技術的研發(fā)。自蘋果收購Luxvue后，蘋果基本上實現(xiàn)了低功耗Micro LED顯示技術的自給自足，Micro LED顯示技術也由此進入快速發(fā)展階段。

●2015年

1、2015年5月

蘋果收購了成立于2003年的全球增強現(xiàn)實行業(yè)領軍企業(yè)Metaio。Metaio開發(fā)了一套虛擬現(xiàn)實創(chuàng)作工具Metaio Creator，用戶可用Creator在“數(shù)分鐘”內創(chuàng)建虛擬現(xiàn)實場景，這款工具也正是蘋果所看重的。彼時Metaio擁有著龐大的開發(fā)者社區(qū)，在全球超過30多個國家里有著1000個客戶和15萬用戶。此次收購對蘋果的虛擬現(xiàn)實和增強現(xiàn)實產品起到了強有力的推進作用，同年蘋果公司還獲得了iPhone上VR頭戴式設備的專利，并開始著手為地圖應用開發(fā)增強現(xiàn)實功能，可讓用戶的手機指向街道時顯示附近的商戶，指向某家餐廳時顯示餐廳的特色菜。Metaio的技術可幫助蘋果增強此類功能。

Metaio的增強現(xiàn)實技術

2、2015年11月

蘋果收購了《星球大戰(zhàn)》背后的動作捕捉技術公司Faceshift。Faceshift是一家位于蘇黎世的虛擬現(xiàn)實技術創(chuàng)業(yè)公司，主要從事面部表情動作捕捉技術研發(fā)與應用，可分析演員的面部表情動作，并應用于動畫影視以及游戲中的虛擬角色。此次收購對蘋果擴展虛擬現(xiàn)實領域來說可謂如虎添翼。

●2016年

1、2016年1月

蘋果收購了Emotient，這是一家研發(fā)面部表情分析工具的公司。Emotient通過人工智能及機器學習技術來分析人類表情，這項技術被廣告商用來分析受眾心理并評估廣告的投放效果。有了Emotient，蘋果進一步優(yōu)化了其人臉識別系統(tǒng)，使其在VR/AR方面擁有更大的發(fā)展?jié)摿?。和Faceshift一樣，Emotient的產品可以為用戶創(chuàng)建虛擬化身，在社交媒體及游戲方面的應用非常廣泛。

Emotient的面部表情識別技術

2、2016年1月

蘋果收購了增強現(xiàn)實領域的初創(chuàng)公司Flyby Media。Flyby Media致力于開發(fā)面向消費者的移動社交平臺，將現(xiàn)實物理世界與數(shù)字內容完美結合，其開發(fā)的V-Fusion技術被廣泛應用于如室內導航、無人汽車、頭戴設備等多個領域。有消息指出，F(xiàn)lyby Media團隊被蘋果收購后，加入了蘋果秘密研究部門并與蘋果團隊合作開發(fā)VR以及AR頭戴設備原型。

●2017年

1、2017年6月

蘋果WWDC 2017開發(fā)者大會在美國圣何塞召開，在此次大會上蘋果并沒有推出在當時同樣呼聲已久的AR眼鏡產品，而是選擇從軟件層入局，基于已有的移動端硬件生態(tài)構建AR生態(tài)，發(fā)布了ARKit。ARKit盡管是初代產品，但其仍然表現(xiàn)不凡。ARKit為開發(fā)者提供了簡潔易操作的AR應用開發(fā)工具，允許開發(fā)者使用設備上的傳感器和攝像頭捕捉現(xiàn)實場景，同時能夠估算環(huán)境亮度并進行渲染等。通過ARKit 1，用戶可以體驗將虛擬物品放置于真實場景中。

2、2017年9月

蘋果收購了加拿大虛擬現(xiàn)實創(chuàng)業(yè)公司Vrvana。Vrvana早在2017年就已經開發(fā)了能夠通過攝像頭支持混合現(xiàn)實的VR頭顯Totem，而且其團隊還開發(fā)了一種可以近乎實時地進行圖像處理的專門芯片。在CES 2017大會上，Vrvana榮獲由Tom’s Hardware評選的最佳硬件產品獎，隨機便吸引了早已在VR/AR領域布局多年的蘋果公司的注意，并以3000萬美元的價格將其收購，并將團隊12名工程師中的9名及其家人帶到了美國加利福尼亞州。

Vrvana的VR頭顯Totem

3、2017年12月

蘋果以2億丹麥克朗（約3089萬美元）的價格，收購了位于哥本哈根的MR視覺特效初創(chuàng)公司Spektral。Spektral最初開發(fā)了允許攝影師精細摳圖的軟件，支持從綠幕中摳出人像，然后再覆蓋新的背景。之后，Spektral通過自己研發(fā)的機器學習軟件來從移動圖像中摳出人像，同時無需綠幕。蘋果在收購Spektral后，可將其開發(fā)的技術應用于增強現(xiàn)實環(huán)境中，在人物背后添加數(shù)字內容，和位于該位置的人物進行互動。

Spektral最初的產品CloudCutout

●2018年

1、2018年1月

蘋果發(fā)布了ARKit 1.5版本更新。相較于初代版本只能識別水平表面，ARKit 1.5則可以進一步識別垂直表面比如窗戶、墻壁等，還可以準確檢測出圓形家具等不規(guī)則表面，同時還新增了2D圖像識別功能。整體而言，ARKit 1.5的整體AR質量有所提升，使用更方便，內容更具沉浸感。

2、2018年6月

在蘋果WWDC的大會上，ARKit 2如期發(fā)布，除此之外，蘋果還推出了一個與皮克斯共同開發(fā)的AR文件格式：USDZ，以及AR快速預覽功能（AR Quick Look）。相較于前代版本，ARKit 2升級了人臉追蹤技術，使渲染更加真實，同時支持3D對象的檢測，體驗也更為持久，更為重要的是，ARKit 2提供可共享的多人AR能力，支持多個用戶在同一個虛擬環(huán)境中進行操作。

3、2018年8月

蘋果宣布收購AR眼鏡顯示技術初創(chuàng)公司Akonia Holographics。這是一家成立于2012年的AR顯示技術初創(chuàng)公司，最初專注于全息數(shù)據(jù)存儲，后轉向研發(fā)用于AR眼鏡的顯示屏。在蘋果將其收購時，這家公司已經擁有200多項與全息系統(tǒng)和材料相關的專利。

4、蘋果申請了一項針對用于頭戴式顯示器的光學系統(tǒng)專利，該專利主要涉及幾項新的光學技術，旨在克服長時間佩戴VR頭顯可能引發(fā)不適的體驗。

5、蘋果申請了一項針對“將VR設備用作自動駕駛車輛的車載娛樂設備”的專利，該專利共包括兩項內容：“沉浸式虛擬顯示屏”及“增強現(xiàn)實顯示屏”，旨在緩解用戶自動駕駛車輛的暈車癥狀，同時提升用戶的工作效率。

●2019年

1、2019年6月

2019年6月的蘋果WWDC上，蘋果公布了其在AR領域的最新動態(tài)，發(fā)布了ARKit的第三代版本，同時還發(fā)布兩個新的AR開發(fā)工具：RealityKit和Reality Composer。RealityKit可以實現(xiàn)攝像級的真實渲染、環(huán)境及鏡頭特效；Reality Composer則是一款獨立的用于建模的應用，內置AR內容庫存，用戶在應用中可以對素材進行編輯、拖拽、動畫生成等操作，快速構建AR交互體驗。 ARKit 3的更新則包括：動作捕捉更加精準且簡潔，只需將攝像頭對準目標人物，即可捕捉其人物動作，且支持同時捕捉三個人的人物面部，同時第三代版本的ARKit開始提供協(xié)作會議功能，支持多人實時協(xié)作，構建協(xié)作世界地圖等功能。

2、2019年10月

蘋果收購英國視覺效果公司IKinema。IKinema是一家主要為游戲和虛擬現(xiàn)實等行業(yè)提供動畫技術的動捕公司，專業(yè)從事于支持虛擬角色實現(xiàn)實時動畫的技術。IKinema的動作捕捉技術曾被微軟、迪斯尼、福克斯和騰訊等客戶使用。蘋果利用這次收購來改進其AR（增強現(xiàn)實）產品，完善ARKit人體姿態(tài)識別追蹤技術功能。

3、蘋果在2019年以數(shù)千萬美元的價格收購了以色列AR創(chuàng)企Camerai Ltd.，并將其納入計算機視覺團隊。蘋果之所以會收購這家公司，是因為Camerai所開發(fā)的技術已成為蘋果攝像頭的關鍵組成要素，將該技術集成到蘋果的相機中后，對于希望在各種應用程序中包含AR功能的開發(fā)人員來說，開發(fā)工作將會變得輕松。

Camerai成立于2014年，由Aaron Wetzler、Erez Tal、Jonathan Rimon和Moty Kosharovsky創(chuàng)建。該公司專注于開發(fā)攝影技術，包括基于深度學習和計算機視覺的先進技術。

4、蘋果申請了一項涉及一種頭戴式眼動追蹤設備的專利，其主要用于確定至少一只眼睛的至少一個第一特征。頭戴式眼動追蹤設備包括至少一個捕獲組件，其用于捕獲由用戶至少一只眼睛反射的光線。至少一個光學元件能夠改變通過光學元件的光線傳播方向。另外，專利介紹了一種利用頭戴式眼動追蹤設備來確定用戶至少一只眼睛的至少一個第一特征的方法。

5、蘋果申請了一項用于頭戴式顯示器的光學系統(tǒng)專利，該專利有望解決VR頭顯和矯正眼鏡佩戴舒適度差的痛點。

●2020年

1、2020年1月

蘋果收購了西雅圖初創(chuàng)公司Xnor.ai。這家創(chuàng)業(yè)公司專門研究基于邊緣的低功耗人工智能工具，能在智能手機、相機和無人機等邊緣設備中有效部署AI算力。在蘋果收購案例中，Xnor.ai是邊緣計算領域的第一例，這也代表著蘋果進軍邊緣計算的雄心，而這一技術也可進一步應用于其VR/AR頭戴設備當中。

2、2020年5月

蘋果斥資1億美元收購了虛擬現(xiàn)實公司NextVR。NextVR是為VR頭顯提供體育和音樂等實時內容的創(chuàng)業(yè)公司，在其產品組合中擁有多項技術專利，它與領先的體育和現(xiàn)場娛樂公司廣泛合作，并使用PlayStation，Osulus，HTC，Microsoft和Lenovo生產的VR頭顯為觀看現(xiàn)場賽事提供VR體驗。通過此次收購可以看出，蘋果實際上正在通過ARKit公開為其未來的頭戴設備搭建平臺。

3、2020年6月

蘋果官網更新了第四代版本的ARKit，ARKit 4更新圍繞LiDAR展開，包含了深度API、位置錨定、面部追蹤等功能。

深度API：基于LiDAR對周圍環(huán)境進行深度信息分析。通過與Scene Geometry API生成的3D網格數(shù)據(jù)結合使用，讓虛擬物體與顯示物體的的結合更加自然和真實，人物遮擋效果更好。

位置錨定：利用LiDAR收集的深度信息，通過位置錨定功能和蘋果地圖中的數(shù)據(jù)將AR作品錨定在特定的經、緯度以及高度，用戶可圍繞虛擬對象從不同角度對其進行觀察。

面部追蹤更新：降低了對終端的要求，將面部追蹤功能擴展到更多設備，讓更多設備支持前置攝像頭的AR體驗。

多圖像的物理信息測量：支持一次性最多100張圖像的信息檢測 ，并自動估算圖像中對象的物理尺寸。

4、繼收購NextVR之后，蘋果于同年又收購了一家VR初創(chuàng)公司Spaces。2016年，Spaces從夢工廠動畫公司（DreamWorks Animation）剝離出來，開發(fā)了包括“Terminator Salvation: Fight for the Future”在內的一系列基于位置的虛擬現(xiàn)實體驗。但突然爆發(fā)的疫情讓Spaces不得不關閉其VR中心，轉向傳統(tǒng)視頻會議領域，該公司為Zoom等平臺提供構建了一個VR附加組件，讓這些平臺的用戶可以使用動畫頭像參加視頻會議。蘋果有可能在Spaces團隊的助力下開發(fā)自己的VR產品和解決方案。

5、蘋果發(fā)布了「提醒VR頭顯用戶規(guī)避障礙物的警示系統(tǒng)」的知識產權報告，該專利涉及一種技術，可以提醒沉浸在VR游戲中的玩家規(guī)避物理空間障礙物。

●2021年

1、2021年6月

蘋果發(fā)布了ARKit第五代版本ARKit 5與迭代版本的RealityKit 2。

ARKit 5較前代版本主要進行了三項更新：

位置錨定支持更多城市，用戶可以在倫敦以及美國更多城市的特定地點創(chuàng)建AR體驗；擴展對面部追蹤的支持，支持任何搭載 A 12仿生芯片及更高版本設備的前置攝像頭，包括iPad Pro（第5代）超寬攝像頭，以保證讓更多用戶能夠獲得AR體驗；App Clip Code，開發(fā)者可以將App Clips或ARKit應用中的虛擬內容固定到印刷版或數(shù)字版的App Clip Code，其他玩家可以通過掃描二維碼快速查看相關虛擬內容。

而RealityKit 2新增功能則包括：

3D掃描（Object Capture API）、自定義著色器、動態(tài)加載方式、系統(tǒng)模塊定制和虛擬角色控制器。RealityKit 2新增的 Object Capture API則可幫助用戶將幾張2D照片合成高質量的3D模型。

2、蘋果發(fā)布了一項名為“生成身體姿態(tài)信息”的專利，該專利描繪了系統(tǒng)如何追蹤用戶肢體動作以及基于數(shù)據(jù)同步反饋VR化身動作，蘋果認為該專利可以改進頭顯的性能，包括與用戶的交互方式。

3、蘋果發(fā)布了一項名為“自適應無線傳輸方案”的專利，該專利旨在處理VR頭顯與主機之間的通信。

4、蘋果發(fā)布了一項具有動態(tài)聚焦3D顯示的VR/AR頭顯相關專利，區(qū)別于傳統(tǒng)VR系統(tǒng)將左右眼圖像投射至主屏幕，蘋果的新方法則直接采用視網膜投影系統(tǒng)，將圖像逐像素掃描到用戶的視網膜上。該專利旨在解決可能會分散用戶注意力或降低他們對VR/AR環(huán)境的耐力水平（即容忍度）的會聚-調節(jié)沖突問題。

5、蘋果發(fā)布了一項涉及皮膚檢測與皮膚接觸系統(tǒng)的專利，該專利用于檢測用戶在VR/AR環(huán)境中雙手或兩根手指之間的交互動作。

6、蘋果發(fā)布了一種非常適配AR頭戴式設備的獨特鏡頭系統(tǒng)設計，其中包括了名為“Lenslets”的新鏡頭系統(tǒng)。根據(jù)專利描述，該鏡頭系統(tǒng)的入瞳位置與人眼入瞳位置匹配或接近匹配，該鏡頭系統(tǒng)比傳統(tǒng)的鏡頭系統(tǒng)薄得多，因此非常適合頭戴式設備應用。

7、蘋果發(fā)布了一項涉及VR/AR計算機系統(tǒng)新專利，這項發(fā)明優(yōu)化了傳統(tǒng)的計算機交互系統(tǒng)，以支持VR/AR環(huán)境下的計算交互。該專利減少了來自用戶的輸入端數(shù)量、范圍/介質，并形成了更高效的人機界面，對于基于電池供電的設備，此專利將能節(jié)省設備電量并延長續(xù)航。

●2022年

1、2022年6月

蘋果發(fā)布ARKit 6，該版本對核心功能進行了改進，以支持開發(fā)者基于iPhone和iPad以及可能即將發(fā)布的MR頭顯構建更優(yōu)質AR應用。ARKit 6包含了“MotionCapture”功能，可追蹤視頻幀中的人物，并為開發(fā)者提供了可預估人類頭部和四肢位置的角色“骨架”，從而支持開發(fā)者創(chuàng)建應用程序，進而將AR內容疊加至角色，或隱藏于角色身后，以更真實與場景融為一體。

此外，ARKit 6還支持開發(fā)者基于AR應用程序控制攝像頭，開發(fā)者可以根據(jù)需要調整白平衡、亮度和焦點等內容，并且可以從每個傳入幀中讀取EXIF數(shù)據(jù)。

2、蘋果發(fā)布了一項涉及基于自混合干涉測量法的表面質量傳感的新專利，該技術可以使Apple Pencil等設備轉換為緊湊型智能手套或智能戒指，與現(xiàn)有的機械表面輪廓或基于圖像的表面質量傳感器相比，這將使設備能在低功率、高速率的模式下運行。

3、蘋果發(fā)布了一項與VR駕乘系統(tǒng)相關的專利，該系統(tǒng)可以解決車輛行駛中可能導致的乘客暈車問題。該VR系統(tǒng)面向沒有窗戶的自動駕駛汽車而設計，基于VR頭顯，駕駛員將能根據(jù)可視化道路視圖進行駕駛、甚至在車上召開虛擬會議以及享受VR游戲、閱讀、聊天等車內服務。

4、蘋果發(fā)布了一項與“數(shù)碼表冠”（Digital Crown）相關的授權專利，該專利可能是蘋果未來AR/VR頭顯的一部分，同時也可能最終擴展到智能眼鏡和前面板，根據(jù)專利說明，該數(shù)碼表冠可控制例如放大圖像、控制音量、顯示亮度等諸多獨特功能。

5、蘋果發(fā)布了一項“支持在增強現(xiàn)實（AR）環(huán)境下自動測量手腕大小的圖形用戶界面”的專利，該專利涵蓋了AR計算系統(tǒng)，包括但不限于在AR環(huán)境中對顯示的虛擬對象進行測量的電子設備。

6、蘋果發(fā)布了一項與擴展現(xiàn)實（XR）環(huán)境下物體變形相關的專利，該專利涵蓋了XR環(huán)境下修改XR對象顯示的系統(tǒng)和方法。

7、蘋果發(fā)布了一項“基于低分辨率圖像的眼動追蹤”的專利，該專利涉及在AR/VR應用中使用頭部運動傳感器進行眼動追蹤的解決方案和相關設備。

8、蘋果發(fā)布了一項涉及蘋果歌曲應用“Shazam”下一代功能的專利。專利表明，該應用迭代版本將支持在包括AR/VR頭顯、iPhone、iPad、智能隱形眼鏡、汽車擋風玻璃平視顯示屏在內的更多設備上運行。該專利描述了一項全新功能，該功能可通過一個動作（例如搖頭）來判斷用戶對音頻內容是否感興趣，并能根據(jù)用戶頭部搖擺節(jié)拍以觸發(fā)及識別用戶正在欣賞的曲調。

9、蘋果發(fā)布了一項涉及一種新的HMD相機系統(tǒng)的專利，該系統(tǒng)包括一個二維相機陣列，可以捕捉場景各個部分的圖像。專利顯示，相機陣列將沿球面放置，以便相機具有相鄰的視野。這些相機的入瞳位置靠近用戶的眼睛，同時相機還會通過傳感器形成優(yōu)化的圖像。專利還描述了用于減少陣列中相機數(shù)量的方法，以及減少從陣列中讀取并進行后續(xù)處理的像素數(shù)量的方法。

10、蘋果發(fā)布了一項涉及檢測皮膚接觸的系統(tǒng)和方法，更具體說，涉及在虛擬現(xiàn)實或增強現(xiàn)實輸入環(huán)境下檢測雙手或手指之間的接觸。雖然該專利名為“skin to skin”，但該專利強調了智能戒指的使用，它可以用于多個用戶手指，并形成在XR應用中使用的手勢。

11、蘋果發(fā)布了一項涉及使用新型無線電路的電子設備的專利，該電路包括電壓駐波無線電 (VSWR) 傳感器，當用戶在MacBook、未來MR頭顯、智能眼鏡等設備的手柄附近做手勢時，該傳感器可用于檢測用戶手指角度。

12、蘋果發(fā)布了一項涉及未來AR/VR頭顯的專利，該頭顯或可支持手指傳感器配件、準確手部反饋，使用戶能夠處理在屏幕上看到的內容，并使用三維空中手勢操作顯示在頭顯/或投影在面前的虛擬內容。

13、蘋果發(fā)布了一項涉及使用不同方法的冷卻系統(tǒng)，該專利名為“頭戴式設備降噪”，該專利旨在為用戶提供靜音冷卻系統(tǒng)，以便頭顯用戶在玩游戲時，能夠長時間佩戴舒適。

14、蘋果發(fā)布了一項涉及通過智能眼鏡或MR HMD網絡向Mac或iPhone/iPad等第二設備提供關于至少一個參考對象(特別是虛擬參考對象)的用戶行為信息的專利。本發(fā)明還包括一種用于在特定虛擬場景中提供關于用戶行為信息的系統(tǒng)，該發(fā)明適用于游戲、飛行模擬訓練等混合現(xiàn)實環(huán)境。

15、蘋果發(fā)布了一項涉及對話和環(huán)境轉錄生成和協(xié)助的專利，該專利描述了生成轉錄以及提供主動和反應性轉錄協(xié)助的技術，該專利可用于iDevices、Mac和蘋果未來MR頭顯的FaceTime通話或辦公室電話會議。

16、蘋果發(fā)布了全新蘋果智能戒指專利，未來的智能戒指將主要用作混合現(xiàn)實頭顯控制設備，其次，這種戒指可以與未來iPhone、iPad、AirPods、Mac及其他設備一起使用。

●2023年

1、蘋果發(fā)布了一項涉及了包括一個或多個帶有U形外殼手指設備在內的系統(tǒng)專利，以用于收集傳感器輸入并提供觸覺輸出。

2、蘋果發(fā)布了一項涉及注視追蹤技術的專利，該技術可用于蘋果未來AR/VR頭顯、車輛HUD系統(tǒng)中的投影系統(tǒng)甚至隱形眼鏡。更具體說，該專利涉及系統(tǒng)、方法和計算機可讀媒體，以改進和平滑眼動追蹤數(shù)據(jù)，以提高眼動追蹤技術性能。

3、蘋果發(fā)布了一項流媒體傳輸沉浸式視頻內容的專利，以為AR/VR頭顯用戶提供卓越的流媒體體驗。這項技術以三維方式為頭顯用戶提供沉浸式視頻內容，在視頻內容輸出時，可根據(jù)用戶身體的位置、方向以及用戶輸入要求，來動態(tài)呈現(xiàn)沉浸式視頻內容。

4、蘋果發(fā)布了一項涉及自混合傳感器和光學元件的未來XR頭顯的專利。本發(fā)明的重點圍繞一個關鍵的前置攝像頭系統(tǒng)，該系統(tǒng)可在攝像頭因用戶不慎掉落頭顯而錯位時自動重置。

5、蘋果發(fā)布了一項涉及一種可能用于蘋果XR頭顯的新設備，該設備基于觸發(fā)器或杠桿扭矩（配備旋轉磁阻電機）反饋機制，以增強VR射擊游戲逼真度。

6、蘋果發(fā)布了一項與3D手指建模相關的專利，該專利涉及AR/VR頭顯手勢和視覺觸摸檢測。該專利描述了一種3D手指模型，該模型可用于檢測和識別觸摸虛擬對象和空中手勢，以支持頭顯反饋指令。

7、蘋果發(fā)布了一項涉及檢測皮膚接觸的系統(tǒng)和方法，更具體說，涉及檢測雙手或兩根手指之間的接觸以在虛擬現(xiàn)實或增強現(xiàn)實環(huán)境中進行輸入。在使用VR頭顯時，通過皮膚接觸可以采取的操作包括但不限于移動光標或指針等對象、滾動或平移、調整控制設置、打開文件或文檔、查看菜單、進行選擇、執(zhí)行指令、操作連接到主機設備的外圍設備。

8、蘋果發(fā)布了一項涉及眼動追蹤交互的專利，專利指出，眼動追蹤設備被配置為追蹤對象，尤其是眼部、眼睛注視點或凝視方向。由于人眼的某些特性因人而異，通常會執(zhí)行校準程序來校準眼動追蹤裝置，以提高所確定的注視點或凝視點的準確性。

9、蘋果發(fā)布了一種計算機系統(tǒng)，該計算機系統(tǒng)具有一個或多個顯示生成組件和一個或多個提供計算機生成體驗的輸入設備，包括但不限于通過一個或多個顯示器提供。

10、蘋果發(fā)布了一項虛擬現(xiàn)實（VR）相關的專利。該專利是蘋果開發(fā)的一種VR系統(tǒng)，該系統(tǒng)能夠用于減輕自動駕駛汽車給乘客帶來的暈車癥。

11、蘋果發(fā)布了一項“可調和中心凹透鏡系統(tǒng)”的專利，該系統(tǒng)基于透鏡堆棧以對用戶眼睛進行視力矯正，該堆棧透鏡由液晶可調透鏡和非液晶可調透鏡組成，其中組合中的非液體鏡片由充液鏡片或阿爾瓦雷斯鏡片組成。

12、蘋果發(fā)布了一項涉及可與夾式可連接鏡頭一起使用的頭戴式設備 (HMD)。該發(fā)明涵蓋了在透明表面上使用機器可讀標記來識別有關透明表面信息的設備、系統(tǒng)和方法。

13、蘋果發(fā)布了一項專利申請，涉及未來Apple Watch Bands、健身手環(huán)、VR手環(huán)，包括嵌入式微機械超聲波換能器 (MUT) 以檢測觸摸、手勢、生理健康信號，并支持設備之間傳輸數(shù)據(jù)。該設備還能夠檢測用戶的指紋（Touch ID）以及增益虛擬現(xiàn)實和混合現(xiàn)實體驗。蘋果專利摘要指出，該發(fā)明涉及微機械超聲波換能器(MUT)，可以嵌入至Apple Watch表帶，以檢測觸摸、手勢、生理信號和傳輸數(shù)據(jù)。

從以上梳理的蘋果公司在XR領域的發(fā)展歷程來看，蘋果在XR領域的布局甚至可以追溯到10年前，而其戰(zhàn)略布局主要依靠三條路徑：收購XR相關技術公司、構建AR應用內容及開發(fā)者生態(tài)、研發(fā)XR相關技術。

蘋果的產品向來以極具親和力的人性化設計著稱，蘋果的出現(xiàn)無疑打破了技術產品在人們心中固有的高深形象，使高新技術在一般用戶面前也變得簡潔易用。從上述內容梳理中我們也不難看出，蘋果在追求用戶體驗、追求人性化設計方面可謂下足了功夫，而這些問題也正是當下AR/VR產品難以走進千家萬戶的一大痛點。

由此來看，蘋果公司在XR領域的布局相當扎實且牢固，因而我們對其即將發(fā)布的MR設備及XR操作系統(tǒng)也完全充滿信心。

結語

蘋果作為全球領先的科技巨頭，遲遲未推出VR/AR硬件，但這并不代表蘋果并未在該領域付出實踐，反而我們可以從上述內容看出，蘋果其實早已在這個行業(yè)深耕多年，說是元老級別也不為過。而其遲遲未能大張旗鼓地進軍該行業(yè)，背后一定有其自己的考量，或許是技術壁壘難以攻克，抑或是對產品完美程度的追求，但這些都并不妨礙我們對其產品的期待。

蘋果公司的產品向來都是藝術與技術融合的典范，其優(yōu)秀的技術品質給人們的生活帶來了便利，也帶來了精神上的享受，它使藝術、技術適應生活需求，并完美地結合在了一起。如今蘋果的MR設備和XR操作系統(tǒng)終于呼之欲出，我們也期待蘋果能夠“寶劍鋒從磨礪出”，以“十年磨一劍”的氣勢斬破黑暗，為全球XR行業(yè)帶來一束光。