本次蘋果秋季發(fā)布會以“高光時刻”為主題，會上Apple Watch Series 10、Apple Watch Ultra 2、Airpods 4、新款A(yù)irPods Max、iPhone 16與iPhone 16 Pro依次亮相。

整場發(fā)布會看完，庫克沒有帶來One More Thing，也沒有放出Vision Pro新一代產(chǎn)品的只言片語。Apple Intelligence貫穿發(fā)布會始終，今年的蘋果關(guān)鍵詞可以說不是空間計(jì)算，而是人工智能。

與Vision Pro相關(guān)度最高的，大概要算iPhone 16系列手機(jī)能夠支持拍攝空間照片和空間視頻了。接下來我們就簡單盤點(diǎn)一下本次發(fā)布會亮相的全部產(chǎn)品吧。

iPhone 16/iPhone 16 Plus 售價：5999/6999 RMB起

第二代3nm制程的A18處理器：6核CPU+5核GPU，CPU提速30%，GPU提速40%。

相機(jī)控制：新的側(cè)邊觸控功能，支持滑動、輕按和點(diǎn)擊，實(shí)現(xiàn)更方便的拍攝控制。

攝像頭：新二合一設(shè)計(jì)的4800萬像素融合式攝像頭，可以實(shí)現(xiàn)2倍光學(xué)長焦；新的超廣角攝像頭帶自動對焦功能，進(jìn)光量提升至最高2.6倍。雙攝組合可以拍攝空間視頻和空間照片并在Vision Pro上欣賞。

混音功能：先進(jìn)的智能技術(shù)和空間音頻錄制，聯(lián)手帶來強(qiáng)大的混音功能，讓你可通過三種不同的聲音選項(xiàng)來調(diào)整視頻中的人聲效果。

新一代攝影風(fēng)格：圖像處理管線優(yōu)化，帶來了新的拍攝風(fēng)格，還加入了自由控制板用于調(diào)整色調(diào)和顏色。

續(xù)航提升：視頻播放時長，iPhone 16可達(dá)22小時，iPhone 16 Plus可達(dá)27小時。

新一代超瓷晶面板：硬度相比初代提升50%。

Action Button操作按鈕：原先配備于iPhone 15 Pro系列機(jī)型的功能現(xiàn)在入門款iPhone同樣搭載。

Apple智能：深植于 iPhone 中的個人化智能系統(tǒng)，能根據(jù)你的個人情境為你在寫作、表達(dá)自我、處理各種事務(wù)上提供協(xié)助，讓一切更簡單輕松。暫不支持簡體中文，計(jì)劃于2025年實(shí)現(xiàn)對簡體中文的支持。

車禍檢測功能：可檢測到嚴(yán)重車禍，然后主動為你撥打求救電話，并通知你的緊急聯(lián)系人。

配色：黑色/白色/粉色/群青色/深青色

iPhone 16 Pro/iPhone 16 Pro Max 售價：7999/9999 RMB起

第二代3nm制程的A18 Pro處理器：新的6核CPU+6核GPU設(shè)計(jì)，系統(tǒng)內(nèi)存總帶寬增大20%，相比A17 Pro，CPU提速15%，GPU提速20%，硬件加速光線追蹤最快達(dá)2倍。新的16核神經(jīng)網(wǎng)絡(luò)引擎帶來更快的端側(cè)AI運(yùn)算能力。

5級鈦金屬設(shè)計(jì)：全新微噴砂工藝，帶來更加細(xì)膩精致的外觀。鈦的強(qiáng)度重量比帶來更堅(jiān)固更輕盈機(jī)身。新亮相沙漠色鈦金屬外觀。

更大的屏幕：iPhone 16 Pro屏幕尺寸提升至6.3英寸，iPhone 16 Pro Max屏幕尺寸提升至6.9英寸，同時邊框變得更窄。

相機(jī)控制：新的側(cè)邊觸控功能，支持滑動、輕按和點(diǎn)擊，實(shí)現(xiàn)更方便的拍攝控制。

視頻拍攝：支持4K 120fps杜比視界格式，能夠更流暢的拍攝慢動作視頻。

麥克風(fēng)升級與混音功能：iPhone 16 Pro 搭載四個錄音棚級麥克風(fēng)，錄制品質(zhì)更高，音頻表現(xiàn)大幅提升。先進(jìn)的智能技術(shù)和空間音頻錄制，聯(lián)手帶來強(qiáng)大的混音功能，讓你可通過三種不同的聲音選項(xiàng)來調(diào)整視頻中的人聲效果。

攝像頭：超廣角攝像頭提升至4800萬像素，搭載四合一像素傳感器，能拍超高分辨率的 4800 萬像素 ProRAW 和 HEIF 照片，并支持自動對焦。原先僅Pro Max擁有的5倍長焦攝像頭下放至Pro機(jī)型。

新一代攝影風(fēng)格：支持實(shí)時預(yù)覽，就像現(xiàn)場進(jìn)行專業(yè)調(diào)色。圖像處理管線優(yōu)化，帶來了新的拍攝風(fēng)格。加入了自由控制板用于調(diào)整色調(diào)和顏色。

續(xù)航升級：視頻播放時間最高提升4小時，iPhone 16 Pro可以達(dá)到27小時，iPhone 16 Pro Max可以達(dá)到33小時。

Apple智能：深植于 iPhone 中的個人化智能系統(tǒng)，能根據(jù)你的個人情境為你在寫作、表達(dá)自我、處理各種事務(wù)上提供協(xié)助，讓一切更簡單輕松。暫不支持簡體中文，計(jì)劃于2025年實(shí)現(xiàn)對簡體中文的支持。

車禍檢測功能：可檢測到嚴(yán)重車禍，然后主動為你撥打求救電話，并通知你的緊急聯(lián)系人。

配色：黑色鈦金屬/原色鈦金屬/白色鈦金屬/沙漠色鈦金屬

Apple Watch Series 10 售價：2999 RMB起

顯示屏：蘋果首款廣視角OLED顯示屏，更亮更易讀。屏幕大小相比Series 3增大75%，相比Series 4、5、6和Apple Watch SE增大30%。

最薄機(jī)身：重新設(shè)計(jì)了SiP芯片、數(shù)碼表冠、揚(yáng)聲器、表鏡和天線，實(shí)現(xiàn)全系列最薄的機(jī)身。

SiP 10芯片：集性能、能效和智能于一身，擁有4核神經(jīng)網(wǎng)絡(luò)引擎，可以快速處理機(jī)器學(xué)習(xí)任務(wù)，支持Transformer模型。

全新外殼：亮黑色鋁金屬外殼，由經(jīng)過30道工序的陽極氧化鋁細(xì)致拋光而來，呈現(xiàn)深邃的黑色光澤。此外還有3款拋光鈦金屬外觀，減輕了重量，相比Series 9不銹鋼表殼輕了約20%。

防水：WR50級防水。

新監(jiān)測功能：可以監(jiān)測睡眠呼吸暫停，可以測量水溫。

揚(yáng)聲器：經(jīng)過重新設(shè)計(jì)，體積縮小30%但不影響音質(zhì)表現(xiàn)。

更快的充電速度：30分鐘充滿80%電量。

Apple Watch Ultra 2 售價：6499 RMB起

全新外殼：全新磨砂黑色鈦金屬表殼，抗劃傷且耐久。

防水：WR100級防水，可用于水深達(dá)40米的休閑水肺潛水。

新表帶：耐腐蝕鈦金屬制作，風(fēng)格適配黑色鈦金屬表殼。

愛馬仕聯(lián)名：Apple Watch Ultra系列新增愛馬仕聯(lián)名表帶。

AirPods 4/主動降噪款 售價：999/1399 RMB

舒適性提升：上耳更貼合，加強(qiáng)了佩戴穩(wěn)固性，保證久戴舒適度。

全新H2芯片：進(jìn)一步提升音頻體驗(yàn)和通話音質(zhì)，還擁有眾多智能功能，可以盡可能降低背景噪音突出用戶聲音，適合各種外界環(huán)境。

音頻升級：支持動態(tài)頭部追蹤的個性化空間音頻，可在聽音樂、追劇、看電影和玩游戲等時候營造 3D 音效體驗(yàn)。

自適應(yīng)均衡功能：內(nèi)向式麥克風(fēng)會檢測聆聽的內(nèi)容，并以此自動調(diào)整低頻和中頻音域，讓每一首歌曲都能呈現(xiàn)出豐富的細(xì)節(jié)。

充電盒更新：體積較上代縮小10%，充電接口由雷電口更新為USB-C接口，和新款iPhone保持一致。

主動降噪款：蘋果首次推出可支持主動降噪的無耳塞耳機(jī)，通過H2 芯片和升級的麥克風(fēng)，主動降噪功能可減弱飛機(jī)引擎、暖通空調(diào) (HVAC) 系統(tǒng)和城市交通等因素造成的低頻環(huán)境噪音。

AirPods Max 售價：3999 RMB

新配色：擁有5款配色，更新至USB-C接口。

音頻提升：iOS 18為AirPods Max帶來了空間音頻，在聽歌、觀影、打游戲時帶來更好的音效體驗(yàn)。

AirPods Pro 2 售價：1899 RMB

全新H2芯片：進(jìn)一步提升音頻體驗(yàn)和通話音質(zhì)，還擁有眾多智能功能，可以盡可能降低背景噪音突出用戶聲音，適合各種外界環(huán)境。

Pro級主動降噪：效果相比第一代AirPods Pro和AirPods 4主動降噪款提升至最高2倍，自適應(yīng)音頻可根據(jù)你所在環(huán)境，相應(yīng)地調(diào)整對噪音的控制。

為聽力護(hù)航：降低高音量功能，會盡可能為你減弱強(qiáng)噪音。對話增強(qiáng)功能，讓你專注聆聽面前說話者的聲音。背景音功能，可播放海浪或下雨等舒緩的聲音，以此來幫你弱化環(huán)境噪音。集主動聽力保護(hù)、臨床級聽力測試和簡單易用的專業(yè)級助聽器于一身。

語音凸顯：改善在喧鬧或大風(fēng)環(huán)境中的通話質(zhì)量，通過先進(jìn)的計(jì)算音頻技術(shù)降低背景噪音，同時將人聲突顯，讓電話那頭的人聽得更清楚。

新的Siri互動方式：當(dāng) Siri 詢問你要不要接電話、聽信息或管理通知時，你只要點(diǎn)點(diǎn)頭就能表示可以，搖搖頭表示拒絕。

個性化空間音頻：借助iPhone上的原深傳感攝像頭，AirPods Pro 2可以根據(jù)你頭部的幾何結(jié)構(gòu)創(chuàng)建專屬于個人的輪廓信息，讓聲音更適合你的耳型。該信息還會在各個設(shè)備間同步，提升所有設(shè)備的音效體驗(yàn)。

充電盒及續(xù)航：啟用 Pro 級主動降噪的聆聽時間最長可達(dá)6小時，搭配充電盒使用時總續(xù)航可達(dá)30小時。

當(dāng)時在CES現(xiàn)場，XREAL Air 2 Ultra就給筆者留下了深刻的印象——鈦合金的框架與電致變色鏡片的搭配讓這款產(chǎn)品在外觀上就具備了出色的質(zhì)感，優(yōu)秀的SLAM能力和精準(zhǔn)的手勢識別對于一款主打空間計(jì)算的AR眼鏡來說也是不可或缺的功能。

不過CES現(xiàn)場排隊(duì)等待體驗(yàn)XREAL Air 2 Ultra的人實(shí)在太多，因此留給每個體驗(yàn)者的時間就十分有限。筆者在現(xiàn)場不到半個小時的體驗(yàn)時間里，只來得及看一看XREAL官方提供的Demo，有點(diǎn)囫圇吞棗意猶未盡的感覺。

時隔6個多月，在7月31日，這款A(yù)R眼鏡終于是正式發(fā)售了，售價3999元。我們也是第一時間拿到了一臺XREAL Air 2 Ultra，終于能夠更深入的體驗(yàn)一下XREAL第二款、同時市面上也很少見的雙目SLAM AR眼鏡。

1月份我們在CES現(xiàn)場體驗(yàn)時，使用的是XREAL Air 2 Ultra + OPPO Find X5手機(jī)的組合；而在5月底，XREAL推出了最新的空間計(jì)算單元Beam Pro，作為手機(jī)的替代，Beam Pro在搭配AR眼鏡使用時做了許多體驗(yàn)上的優(yōu)化。這次評測中，我們也將使用XREAL Air 2 Ultra + Beam Pro的組合，來看一看XREAL為空間計(jì)算打造的一體化開發(fā)套件，表現(xiàn)究竟怎么樣。

值得一提的是，伴隨著XREAL Air 2 Ultra的發(fā)布，XREAL還基于跨平臺游戲引擎Unity構(gòu)建了最新的NRSDK軟件開發(fā)套件，因此這次我們不僅會去體驗(yàn)XREAL Air 2 Ultra的所有硬件功能，還將嘗試著基于最新版NRSDK開發(fā)一個運(yùn)行在Beam Pro上的空間應(yīng)用，以更好的了解XREAL Air 2 Ultra + Beam Pro的組合對于開發(fā)者來說具備怎樣的意義。

閑話不多說，讓我們進(jìn)入正題吧！

XREAL Air 2 Ultra，專為輕量級體驗(yàn)打造的空間計(jì)算產(chǎn)品

XREAL Air 2 Ultra這款新品給我們的第一印象是驚艷。從外觀來看，這款產(chǎn)品相比XREAL Air系列其他眼鏡的最大的差異，是其采用了鈦合金作為框架，亮面金屬的邊框相比純塑料的材質(zhì)讓這款眼鏡具備了更強(qiáng)的質(zhì)感和時尚感。

結(jié)合電致變色鏡片本身的濾光效果，XREAL Air 2 Ultra更像是一款精致的墨鏡。這也是全球首款采用這一材質(zhì)作為框架的AR眼鏡。

鈦合金的框架有效的減輕了眼鏡的整體重量。相比同樣具備雙目SLAM能力的XREAL X眼鏡106克的重量，XREAL Air 2 Ultra的重量僅有83克，與Air 2 73克、Air 2 Pro 75克的重量十分接近。較輕的重量為眼鏡的佩戴舒適度提供了基礎(chǔ)的保證，XREAL還做了更多的設(shè)計(jì)來保障長時間使用場景下的佩戴體驗(yàn)。

鼻托方面，XREAL Air 2 Ultra提供了3種尺寸的鼻托支架，用戶可以自行拆卸更換，此外鼻托支架的支撐角度也能夠自由調(diào)節(jié)，為不同鼻梁高度和形狀的用戶提供最舒適的支撐。接觸鼻子的部分，XREAL Air 2 Ultra采用的是柔軟的中空氣墊，不易下滑可以提供穩(wěn)穩(wěn)的支撐，同時還能夠有效的分散眼鏡重量對鼻子的壓迫。

鏡腿設(shè)計(jì)上，XREAL Air 2 Ultra支持三個角度的調(diào)節(jié)，讓用戶可以將眼前呈現(xiàn)的畫面放在最習(xí)慣的高度。鏡腿夾腳微微內(nèi)收，佩戴上臉時既能提供很好的夾合力確保眼鏡不下滑，也不會對太陽穴和耳朵上方的位置產(chǎn)生壓迫。

在顯示方面，XREAL Air 2 Ultra采用了XREAL自研的第三代“驚鴻銳影”光學(xué)引擎，顯示面板是兩塊來自索尼的0.55英寸1080P分辨率的Micro-OLED，光學(xué)模組則由XREAL自研，F(xiàn)oV達(dá)到52°（其余Air系列產(chǎn)品均為46°），能夠?qū)崿F(xiàn)120Hz刷新率、500尼特亮度、100000:1的對比度和107%的sRGB色域覆蓋，表現(xiàn)十分出色。這種Micro-OLED + BirdBath的組合，是目前市面上使用最廣泛、也是公認(rèn)顯示效果最好的AR眼鏡光學(xué)方案。

實(shí)際體驗(yàn)來看，XREAL Air 2 Ultra的畫面精細(xì)不會有明顯的像素顆粒感，整體色彩觀感優(yōu)秀，沒有察覺出偏色的情況，120Hz的刷新率確保了用戶在轉(zhuǎn)動頭部時畫面顯示依然流暢無撕裂，較高的對比度讓畫面中暗部的細(xì)節(jié)更出色，這些優(yōu)點(diǎn)綜合到一起，帶來了令人印象深刻的顯示效果。

而電致變色鏡片目前已經(jīng)成為了BirdBath光學(xué)方案高端AR眼鏡產(chǎn)品的標(biāo)配，無論在晴朗的室外還是光線較弱的室內(nèi)，只需要輕輕按下鏡腿底部控制電致變色鏡片的按鈕，我們就能讓其切換到最適合的透過率，確保XREAL Air 2 Ultra能夠提供最佳的顯示效果。

我們使用場景較暗的電影畫面分別測試了室外明亮環(huán)境、室內(nèi)明亮環(huán)境以及室內(nèi)昏暗環(huán)境下XREAL Air 2 Ultra表現(xiàn)。從結(jié)果來說，這款A(yù)R眼鏡提供的三檔電致變色鏡片調(diào)節(jié)功能能夠應(yīng)對大多數(shù)的使用場景：室外可以調(diào)節(jié)至透過率最低的一檔，確保強(qiáng)光下AR眼鏡的畫面依然清晰可見，室內(nèi)昏暗環(huán)境下可以調(diào)至透過率最高的一檔，確保你依然可以看見周圍的環(huán)境。

還需要指出的是，XREAL Air 2 Ultra并沒有采用一些友商產(chǎn)品上使用的屈光度調(diào)節(jié)功能，而是給用戶提供了近視插片框架，用戶可以根據(jù)自己的需求前往眼鏡店配片。

也許有不少人會認(rèn)為屈光度調(diào)節(jié)功能十分方便好用，但在我們看來，目前大多數(shù)AR眼鏡提供的屈光度調(diào)節(jié)功能體驗(yàn)仍有待提升，一方面是屈光度調(diào)節(jié)范圍有限，而目前國內(nèi)人群高度近視的人占比并不低，另一方面是通常近視還會伴隨著散光、斜視等其他問題，僅僅調(diào)節(jié)屈光度并不能帶來最好的視覺體驗(yàn)，還可能會加重眼睛的負(fù)擔(dān)，讓用戶能夠根據(jù)自己的實(shí)際情況去進(jìn)行定制或許是一個更好的選擇。

音頻方面，XREAL Air 2 Ultra采用的是AR眼鏡上常見的開放式設(shè)計(jì)，在雙側(cè)鏡腿上下方各配備了一個超線性立體揚(yáng)聲器。這種設(shè)計(jì)方式，主要考驗(yàn)的是音頻系統(tǒng)在嘈雜環(huán)境下的表現(xiàn)以及對漏音的控制能力。

我們在地鐵車廂中實(shí)際測試了XREAL Air 2 Ultra超線性立體揚(yáng)聲器的能力，在將音量調(diào)節(jié)至較大的情況下，我們在車廂嘈雜的環(huán)境中依然能夠清晰的聽見揚(yáng)聲器中傳來的人聲和背景音樂，但與此相對應(yīng)的是隨著音量的變大，會有一定的聲音外泄，不過整體來說外泄聲音較小難以分辨其中的內(nèi)容，用戶無需太過擔(dān)心因?yàn)槁曇敉夥哦鴮λ嗽斐筛蓴_。

為XREAL Air 2 Ultra開發(fā)空間應(yīng)用

前文我們提到過，伴隨著XREAL Air 2 Ultra的發(fā)布，XREAL還將其基于跨平臺游戲引擎Unity構(gòu)建了NRSDK升級到了2.2.1版本。結(jié)合XREAL Air 2 Ultra的雙目SLAM能力，這套SDK可以為開發(fā)者提供6DoF空間定位、手勢識別、圖像識別、平面檢測、深度網(wǎng)格、空間錨點(diǎn)等豐富的功能。

在這次評測中，我們將會嘗試兩件事，幫助大家對基于XREAL Air 2 Ultra開發(fā)空間應(yīng)用這件事有更好的了解：

一是將NRSDK中自帶的示例場景構(gòu)建成可執(zhí)行的App安裝到Beam Pro上并且確保運(yùn)行成功；

二是對示例場景做一些修改，將NRSDK提供的功能全部集成進(jìn)去整合到一個App中，同樣我們需要將其安裝到Beam Pro上并且確保運(yùn)行成功。

在進(jìn)行這兩件事之前，首先我們需要確保開發(fā)環(huán)境全部安裝正確。

為XREAL Air 2 Ultra和Beam Pro開發(fā)空間應(yīng)用，要安裝Unity 2019/2020/2021/2022.X四個版本之一，同時還要安裝Unity中Android Build Support組件確保能夠?qū)nity工程文件編譯成安卓應(yīng)用。這里我們下載安裝的是Unity 2022.3.37f1c1 LTS個人版。

此外，還需要額外安裝Android Studio，然后通過Android Studio安裝Android SDK 10.0及以上的版本，由于Beam Pro操作系統(tǒng)的是Android 14版本，我們直接下載了最新的Android SDK。

最后，你還需要一個代碼編輯器，這里我們選擇了最常用的Visual Studio 2022個人版。

準(zhǔn)備好開發(fā)環(huán)境，下載好NRSDKForUnity的包，我們就可以正式開始開發(fā)工作了。

在Unity中新建一個項(xiàng)目，導(dǎo)入剛剛下載好的NRSDKForUnity包，按照XREAL開發(fā)者社區(qū)的文檔修改好項(xiàng)目的設(shè)置，這時我們可以在Unity左側(cè)的窗口中看到，NRSDK提供了非常豐富的示例場景。

根據(jù)開發(fā)者文檔的指引，我們首先嘗試構(gòu)建HelloMR這一場景。

NRSDK為Unity編輯器提供了一鍵修改項(xiàng)目設(shè)置的功能，大部分設(shè)置內(nèi)容采用默認(rèn)即可，需要手動調(diào)整的設(shè)置主要是Build Settings -> Player Settings下面的公司名和App名稱。另外需要注意的是如果你是為Beam Pro構(gòu)建App，Build Settings -> Player Settings -> Other Settings -> Write Permission應(yīng)當(dāng)設(shè)置成Internal而不是開發(fā)者手冊中寫的External（SDCard），否則在Beam Pro上運(yùn)行時會報(bào)存儲空間不足的錯誤。

在構(gòu)建菜單添加場景時，按照順序?qū)elloMR以及下圖中所列舉的全部場景都加入到Scenes In Build窗口中，否則菜單中點(diǎn)擊不同按鈕切換場景的功能將不會生效。

接下來構(gòu)建成功生成APK文件后，即可在Windows命令行工具中通過ADB命令為Beam Pro（需開啟開發(fā)者模式）安裝應(yīng)用或者直接將APK文件傳輸?shù)紹eam Pro機(jī)身存儲然后通過文件管理器安裝。安裝完成后就能夠在XREAL Air 2 Ultra的Home頁面上看到圖標(biāo)。

點(diǎn)擊運(yùn)行，成功啟動！能夠正常進(jìn)入各個場景中。

接下來，讓我們Get Hands Dirty，自己上手去從零開始搭建一個Demo場景吧！

先疊個甲，我們只能算得上是入門級的開發(fā)者，因此最終呈現(xiàn)的場景只能追求功能的實(shí)現(xiàn)，而無法兼顧到場景的美術(shù)效果，還請大家見諒！

前文提到過，NRSDK有6DoF空間定位、手勢識別、圖像識別、平面檢測、深度網(wǎng)格、空間錨點(diǎn)一共六大能力，在近一周的開發(fā)時間里，我們最終在Demo中成功加入了除空間錨點(diǎn)外的全部功能，而受限于時間和開發(fā)能力，剩下的空間錨點(diǎn)功能只能等后續(xù)有空再補(bǔ)上。

先說結(jié)論吧，從開發(fā)的整體體驗(yàn)來說，NRSDK為開發(fā)者提供了非常詳細(xì)的功能Demo，給開發(fā)者們作為參考。對于大多數(shù)基礎(chǔ)功能的實(shí)現(xiàn)，開發(fā)者只需要將NRSDK中提供的對應(yīng)Prefab組件拖入到場景中就能夠直接使用這些功能。

換句話來說，只要開發(fā)者對于使用Unity開發(fā)3D應(yīng)用有一定的經(jīng)驗(yàn)，就可以快速上手XREAL Air系列AR眼鏡的應(yīng)用開發(fā)。大多數(shù)時候開發(fā)者只需要將精力放在體驗(yàn)本身的交互和邏輯上即可，有效的降低了空間應(yīng)用的開發(fā)門檻。

接下來則是我們實(shí)現(xiàn)每個功能的細(xì)節(jié)：

6DoF功能的開啟最為簡單，只需要在NRSDK提供的NRCameraRig組件調(diào)整一下Tracking Type追蹤類型即可。NRSDK提供了4種追蹤模式：6DoF、3DoF、0DoF（即跟頭模式，畫面會始終出現(xiàn)在面前固定的位置）、0DoF Stable（猜測是用于高鐵、飛機(jī)等場景的防抖模式）。

XREAL Air 2 Ultra會使用眼鏡兩側(cè)的SLAM攝像頭來識別特征點(diǎn)，并追蹤這些特征點(diǎn)隨時間的運(yùn)動，結(jié)合眼鏡IMU傳感器的讀數(shù)來確定自身在環(huán)境中移動時的位置和方向。因此這里直接選擇6DoF模式即可。我們也可以通過代碼在Demo運(yùn)行時動態(tài)的切換追蹤模式。

開發(fā)者手冊的信息顯示，6DoF追蹤還能為開發(fā)人員提供了實(shí)時地圖構(gòu)造和 3D 點(diǎn)云，可以為應(yīng)用程序提供有關(guān)環(huán)境物理結(jié)構(gòu)的信息。

接下來我們要給Demo加入手勢識別和手勢追蹤功能。

手勢識別和手勢追蹤是最貼近自然的交互方式，對于提升與虛擬物體交互的沉浸度有非常大的幫助。NRSDK能夠識別每只手23個關(guān)節(jié)的位置和姿勢，讓開發(fā)者可以根據(jù)自己的需要定義手部動作和程序指令的對應(yīng)關(guān)系。

同時，NRSDK已經(jīng)內(nèi)置了對6種手勢的識別，給開發(fā)者提供了更易上手的選項(xiàng)。NRSDK還為控制器和手勢兩種交互方式實(shí)現(xiàn)了統(tǒng)一的事件機(jī)制，讓我們無需額外的開發(fā)工作，也能夠輕松的讓一款應(yīng)用同時適配支持/不支持手勢識別的XREAL Air系列AR眼鏡。

在我們的Demo中可以看到，控制的方式可以在控制器和手勢識別間進(jìn)行快速的切換，我們可以像使用控制器那樣直接的與虛擬的物體進(jìn)行交互。

在手勢交互方面，NRSDK中默認(rèn)提供的是使用手部射線進(jìn)行選取、手勢負(fù)責(zé)確認(rèn)的方式，這種方式對于XREAL Air 2 Ultra + Beam Pro這種最適合坐著使用的組合來說最為合適。當(dāng)然開發(fā)者也完全可以不依賴于射線，開發(fā)更貼近現(xiàn)實(shí)世界的交互方式，但這也意味著用戶可能需要四處走動才能與周圍環(huán)境中的虛擬物體進(jìn)行交互。

我們嘗試向Demo中加入的第二項(xiàng)功能，是Depth Meshing深度網(wǎng)格，從中一窺XREAL Air 2 Ultra對于周圍環(huán)境的建圖能力。

根據(jù)NRSDK的開發(fā)者手冊的引導(dǎo)，我們在Unity中只做了一些簡單的步驟，就成功的讓深度網(wǎng)格呈現(xiàn)在了我們的面前。隨著我們不斷的觀察向新的方向和區(qū)域，深度網(wǎng)格也在同步進(jìn)行生成。在沒有做任何優(yōu)化的情況下，深度網(wǎng)格的生成速度已經(jīng)穩(wěn)定且高效，從精準(zhǔn)度方面來看，深度網(wǎng)格的位置是十分準(zhǔn)確的，在精度方面也足以勝任大部分的場景。

而有了這些帶有物理碰撞檢測的深度網(wǎng)格，我們就可以在應(yīng)用中實(shí)現(xiàn)虛擬物體和現(xiàn)實(shí)物體的交互，甚至能夠?qū)崿F(xiàn)用現(xiàn)實(shí)物體遮擋虛擬物體的效果。從視頻中可以看到，在深度網(wǎng)格生成后，我們可以讓一些虛擬物體自由落體到深度網(wǎng)格上。毫不夸張的說，深度網(wǎng)格是一款空間計(jì)算設(shè)備最重要的能力之一。

在開發(fā)者文檔中我們看到，NRSDK還提供了針對深度網(wǎng)格的分類功能，支持10個種類的標(biāo)簽，包括了室內(nèi)常見的墻壁、地板、天花板、門，室外常見的道路、人行道、草坪、建筑等等，并且可以針對每個種類的標(biāo)簽設(shè)置一個Prefab并顯示在對應(yīng)的深度網(wǎng)格位置，相當(dāng)于一個進(jìn)階版本的平面檢測。

接下來是圖像檢測的功能。我們需要做的是將需要被識別的圖片導(dǎo)入到項(xiàng)目中，然后為這些圖片生成一個數(shù)據(jù)集Tracking Image Database，最后還要填入圖片對應(yīng)實(shí)物的尺寸。

做完這些準(zhǔn)備工作，我們還要設(shè)定圖片被識別后出現(xiàn)的虛擬物體，如果想要讓出現(xiàn)的虛擬物體可以被交互，還需要撰寫相應(yīng)的交互代碼。

我們在Demo中直接使用了官方的Spatial Life應(yīng)用中用到的綠色卡片，做了一個簡單的功能示例——當(dāng)XREAL Air 2 Ultra識別到這張卡片時，會在卡片上生成一輛小汽車的模型，然后我們可以通過手勢來與這輛小汽車進(jìn)行交互，讓它下落到對應(yīng)周圍環(huán)境生成的深度網(wǎng)格上。

針對具體的實(shí)現(xiàn)方法，官方的開發(fā)者手冊寫的并不是特別詳細(xì)，也是讓我們摸索了很長一段時間。前面的步驟開發(fā)者手冊中寫的都沒有什么問題：首先我們需要為想要追蹤的圖片建立數(shù)據(jù)集，然后在NRKernalSessionConfig文件中設(shè)置好我們剛剛建立的數(shù)據(jù)集，隨后可以在Unity編輯器中新建一個空的GameObject，并添加NRSDK中提供的MarkerDetector.cs腳本文件作為這個GameObject的組件。

到達(dá)這一步，我們已經(jīng)可以做到通過SLAM攝像頭追蹤目標(biāo)圖片，并通過NRSDK提供的一些列API在程序中實(shí)時獲取追蹤的狀態(tài)。不過想要像Spatial Life中那樣讓虛擬物體跟隨著現(xiàn)實(shí)世界中的XREAL Markers動起來，我們還需要一些額外的步驟。

在項(xiàng)目文件夾中新建一個Prefab，然后為其新增一個NRSDK中提供了的NR Trackable Image Behaviour腳本。在腳本的Image Target參數(shù)中選中我們希望識別的圖片，這個腳本會自動的幫我們完成一些設(shè)置，并且會在Unity編輯器中顯示一張?zhí)摂M的追蹤圖片。

接下來我們只需要在這個Prefab下面繼續(xù)添加在識別到圖片后想要呈現(xiàn)的虛擬物體即可。

最終呈現(xiàn)的效果如下面一系列的動圖所示：我們首先掃描了附近環(huán)境生成了一個深度網(wǎng)格，在視頻中以彩色背景呈現(xiàn)，在畫面右方有一塊高出的地面的部分，是一張圓形的茶幾，我們將綠色的XREAL Marker放在了茶幾邊緣，然后啟動了圖像追蹤功能，當(dāng)XREAL Air 2 Ultra檢測到當(dāng)前視野中出現(xiàn)了Marker，就會顯示出我們預(yù)先設(shè)計(jì)好的虛擬物體。

隨后我們拿起了這張Marker實(shí)物并進(jìn)行了轉(zhuǎn)動，虛擬的玩具車也會始終跟隨Marker的位置和姿勢運(yùn)動。盡管由于手和Marker的互相遮擋導(dǎo)致了追蹤的短暫丟失，但是一旦遮擋部分露出來，追蹤就能夠立馬恢復(fù)。

最后結(jié)尾，我們通過一個Pinch手勢觸發(fā)了我們?yōu)橥婢哕噷懙慕换?，讓其向前行駛，躍下茶幾，落在了代表地面的網(wǎng)格上。

至此，我們也算是基本達(dá)成了在開發(fā)Demo前為自己預(yù)設(shè)的目標(biāo)。

唯一剩下的空間錨點(diǎn)功能我們直接借用開發(fā)者手冊的內(nèi)容做個補(bǔ)全吧，這一功能可以讓虛擬物體被錨定在現(xiàn)實(shí)世界的某一個位置上，即使用戶關(guān)閉應(yīng)用再打開，這個虛擬物體所在的位置也不會發(fā)生變化，這對于為用戶提供一致且可靠的AR體驗(yàn)十分重要，還可以被用于實(shí)現(xiàn)多用戶參與的AR體驗(yàn)，實(shí)現(xiàn)博物館導(dǎo)覽等類似的體驗(yàn)。

寫在最后

一周的時間里，我們?yōu)閄REAL Air 2 Ultra + Beam Pro開發(fā)了一個畫面簡陋但功能較為完備的空間應(yīng)用Demo。在上述提到的功能之外，我們還參照官方Tutorial順利實(shí)現(xiàn)了應(yīng)用內(nèi)的視頻錄制功能。唯一的遺憾，是XREAL Air 2 Ultra并沒有RGB攝像頭，因此我們只能錄制黑色背景的機(jī)內(nèi)畫面。而無法錄制以現(xiàn)實(shí)環(huán)境作為背景的MR視頻來完整的展示使用這款A(yù)R眼鏡時的畫面。

需要說明的是，作為一個Unity新手，我們在開發(fā)的過程中也遇到了一些不那么順暢的地方。例如我們常常在和一些奇怪的代碼玄學(xué)搏斗，最常見的一個問題，就是Ctrl+C、Ctrl+V的代碼沒問題，一旦自己嘗試著加上一些新功能運(yùn)行總是出狀況，讓我們花費(fèi)了大量的時間去排查BUG所在。

此外，官方提供的NRSDK開發(fā)者手冊目前還是純英文的，對于國內(nèi)的開發(fā)者來說沒有那么方便；開發(fā)者手冊在部分功能的說明上寫的較為簡略，對于一些剛剛接觸NRSDK和AR眼鏡應(yīng)用開發(fā)的開發(fā)者來說需要一定的時間去摸索才能更好的了解NRSDK提供的各項(xiàng)功能和API接口。

好在NRSDK的示例場景中已經(jīng)提供不少現(xiàn)成的代碼可以供開發(fā)者參考，尤其是針對一些核心功能甚至提供了不止一個示例來幫助開發(fā)者更好的掌握NRSDK和XREAL Air 2 Ultra + Beam Pro的能力，但我們也十分希望后續(xù)XREAL能夠進(jìn)一步完善NRSDK的開發(fā)者手冊并且提供更豐富的Tutorial，更好的幫助開發(fā)者了解如何為XREAL Air系列產(chǎn)品開發(fā)出優(yōu)秀的應(yīng)用。

可以確定的是，如果你對輕量級空間應(yīng)用的開發(fā)擁有濃厚的興趣，那么NRSDK、XREAL Air 2 Ultra、Beam Pro的組合，是一個頗具性價比的選擇：具備雙目SLAM能力的XREAL Air 2 Ultra硬件素質(zhì)出眾且輕便易攜；Beam Pro專為空間計(jì)算體驗(yàn)設(shè)計(jì)和優(yōu)化；NRSDK提供了強(qiáng)大且齊全的空間計(jì)算底層能力，使用簡單易上手。

根據(jù)XREAL透露的數(shù)據(jù)，目前XREAL Community里聚集的XR開發(fā)者數(shù)量已經(jīng)達(dá)到數(shù)千人，這讓我們十分期待后續(xù)能夠在XREAL Air 2 Ultra + Beam Pro這套空間計(jì)算組合上，看到越來越多優(yōu)秀的空間應(yīng)用涌現(xiàn)。

上個月，我來到了藝術(shù)氣息濃郁的北京798藝術(shù)區(qū)，體驗(yàn)了一部全新的XR大空間內(nèi)容，這就是由佳創(chuàng)視訊集團(tuán)旗下A Lab工作室制作的《山?？臻g》。當(dāng)時它帶給我的體驗(yàn)極其震撼，以至于結(jié)束體驗(yàn)后我馬上就產(chǎn)生了采訪制作人的想法。在數(shù)日后的一場XR圈內(nèi)聚會上，這個想法得以實(shí)現(xiàn)：在一個多小時的時間里，我與《山?？臻g》的制作人、同樣是XR行業(yè)老兵的錢清泉交流了這部作品的前世今生與諸多有趣之處。

不破不立

與以往的VR大空間項(xiàng)目不同，《山?？臻g》是基于蘋果Vision Pro進(jìn)行設(shè)計(jì)與開發(fā)的，其體驗(yàn)場地也不是傳統(tǒng)的室內(nèi)環(huán)境，而是面積達(dá)數(shù)千平米的798步行街主干道。全新的硬件終端、戶外場地、超大面積等諸多特點(diǎn)使其成為國內(nèi)甚至全球范圍第一個“吃螃蟹”的大空間Vision Pro項(xiàng)目。

制作人錢清泉，之前曾進(jìn)行過多年VR線下大空間游戲、VR線上社交游戲開發(fā)。伴隨著Vision Pro在去年蘋果WWDC上發(fā)布，圍繞它的“空間計(jì)算”概念迅速成為僅次于AI大模型的科技熱詞之一，不少開發(fā)者與科技公司紛紛計(jì)劃進(jìn)入這一賽道，其中也包括佳創(chuàng)視訊。由此，一支年輕的研發(fā)團(tuán)隊(duì)組建起來，在經(jīng)過數(shù)月的思考與討論之后，錢清泉將研發(fā)方向定在了多人大空間內(nèi)容。

“去年有一款名為《法老》的現(xiàn)象級的線下產(chǎn)品，我認(rèn)為它最大的進(jìn)步是把單位時間內(nèi)接待用戶的吞吐量提升到一個新層次，同時它采用輕交互，大大降低了用戶體驗(yàn)門檻。過去我們做的大空間游戲的用戶大部分是游戲和密室玩家，而該產(chǎn)品的用戶既有老人和孩子，也包括其他非玩家群體。”這部VR多人大空間內(nèi)容的諸多創(chuàng)新帶來了商業(yè)上的巨大成功，也引發(fā)了錢清泉更多的思考?！拔覀冊谶€沒有拿到Vision Pro的時候就在思考，比如如何設(shè)置我們的場地。Vision Pro與傳統(tǒng)VR頭顯不同的地方在于它的視野是可以與實(shí)景結(jié)合的，在尋找場地的過程中，我逐漸意識到或許使用場景放在戶外是個有趣的選擇?！?/p>

“在之后的數(shù)月時間里，我們逐步將腦海中的想法清晰化，并解決了內(nèi)容創(chuàng)作與技術(shù)實(shí)現(xiàn)上的諸多問題，這并不能算是靈感閃現(xiàn)，而是在保持趣味與好奇的心態(tài)下，一步一步逐漸成形的?！弊罱K在今年7月，錢清泉和他的團(tuán)隊(duì)呈現(xiàn)了這樣一部里程碑性質(zhì)的作品——從封閉室內(nèi)的純虛擬VR大空間到戶外開放的擴(kuò)展現(xiàn)實(shí)空間產(chǎn)品《山?？臻g》。

如何登上月球

前面提到了，《山?？臻g》是一個典型的“吃螃蟹”項(xiàng)目，而這只“螃蟹”的味道究竟如何呢？以我個人的體驗(yàn)來說，非常美味。在戴上Vision Pro之后，我看向出發(fā)點(diǎn)墻上的一張引導(dǎo)圖片，系統(tǒng)通過掃描圖上的圖案完成了激活，然后內(nèi)容正式啟動。從目前的體驗(yàn)來看，《山海空間》的當(dāng)前版本更接近一部單人體驗(yàn)內(nèi)容，每名用戶看到的虛擬內(nèi)容中并不包含其他用戶。在我們的眼前，是現(xiàn)實(shí)的環(huán)境與虛擬的數(shù)字內(nèi)容的疊加，這樣我們自然不會在移動中撞到別人。

走在798步行街的主干道，我會看到路旁的各種巨大的數(shù)字虛擬物體，比如粉色的櫻花巨樹、充滿邪典氣質(zhì)的月球和補(bǔ)天的女媧。而或從我身后穿過、或?qū)ξ矣娑鴣淼囊吧鷦游锖突ń钟涡袆t讓我下意識的作出了規(guī)避的動作。當(dāng)然，我看到的虛擬物體不全是巨大的：不經(jīng)意之間，我發(fā)現(xiàn)現(xiàn)實(shí)的草坪上有兩個說不清是什么的小怪物在向我招手。《山?？臻g》所包含的數(shù)字虛擬內(nèi)容不完全來自《山海經(jīng)》，它更像是一部“賽博山海經(jīng)”——包含了人類各種奇思妙想的數(shù)字狂歡或行為藝術(shù)。而更有趣的是，作為體驗(yàn)者的我們，本身也是這場狂歡的一部分，我身旁的一位女士（極客電影的創(chuàng)始人李東東）興奮的向我分享她看到的各種景象，然后問我是不是也看到了。

當(dāng)我詢問這些夢幻、有趣的內(nèi)容是如何借助Vision Pro這一全新的XR硬件制作出來的，錢清泉告訴我，作為制作人，最重要的就是帶給團(tuán)隊(duì)成員希望并激發(fā)團(tuán)隊(duì)成員的創(chuàng)造力?！澳闶紫纫o大家一個愿景，我們要做一個全新的東西，而不是沉悶的復(fù)制原來的東西，這樣大家每天都會很快速的和你討論一些新想法是否可行，然后進(jìn)行不斷的嘗試?！?/p>

在交流過程中，錢清泉一直強(qiáng)調(diào)，《山海空間》的制作是一個漸進(jìn)的過程。“在我剛開始提出項(xiàng)目的訴求和愿景的時候，沒人相信這玩意兒能做出來。所以我會從一些簡單的需求開始，讓團(tuán)隊(duì)逐漸搭建出一個實(shí)驗(yàn)性的框架，這樣團(tuán)隊(duì)的信心就會不斷累加，慢慢嘗試做出一個又一個功能。”

舉個例子來說，在體驗(yàn)中讓我印象最為深刻的是那些巨大的數(shù)字虛擬物體，它們帶給我的震撼感遠(yuǎn)比其他內(nèi)容更大。錢清泉表示，這其中的一些靈感源于他在電影上學(xué)到的視聽語言相關(guān)知識，比如關(guān)于視聽語言的演化規(guī)律，而另一些靈感則來源于夢境?！霸陂_發(fā)最深度的階段，我們有時候會夢到產(chǎn)品中的內(nèi)容，這些夢中的東西與現(xiàn)實(shí)的思考進(jìn)行碰撞，就形成了你最終看到的內(nèi)容?！?/p>

除了狂野的想象力，《山?？臻g》中的一些設(shè)計(jì)則是基于現(xiàn)實(shí)的考慮。在我們體驗(yàn)的路上設(shè)有一些定位用的路牌標(biāo)志，為了獲得最優(yōu)的體驗(yàn)，我們需要定期去這些路牌處進(jìn)行定位校準(zhǔn)，具體的操作就是走到路牌正前方讓Vision Pro上的攝像頭掃描路牌上的圖案。錢清泉告訴我，所有采用Inside-out定位的頭顯都存在這樣的問題：隨著設(shè)備的移動，系統(tǒng)定位的誤差會不斷積累，最終影響到用戶的體驗(yàn)。而定期的定位校準(zhǔn)則可以消除之前的錯誤積累，同時團(tuán)隊(duì)也在不斷對這個過程進(jìn)行優(yōu)化，讓用戶不會因?yàn)檫@類操作而影響自己的心流體驗(yàn)。

星辰大海

關(guān)于《山?？臻g》下一步的計(jì)劃，錢清泉表示，團(tuán)隊(duì)首先會對目前的1.0版本持續(xù)優(yōu)化，而更遠(yuǎn)期的規(guī)劃則是將內(nèi)容“沙盒化”，把原有線性的流程變成覆蓋整個798園區(qū)的沙盒內(nèi)容?！拔磥砦覀兿Ｍ憧梢匀齑髦鳹ision Pro在798里面漫游，當(dāng)然這個工作量還是很大的，我們需要和第三方一起創(chuàng)作整個園區(qū)中不同的街道的數(shù)字內(nèi)容?！?/p>

當(dāng)我問到《山?？臻g》的模式是否可以拓展到其他文旅場景時，錢清泉給出了肯定的答案。“每一個文旅場景都有自己的開發(fā)度甜蜜點(diǎn)，比如說一處花海景點(diǎn)，你是不可能無限添加其他的建筑物或商業(yè)設(shè)施的。在這種無法向上開發(fā)的場景中，就可以采用這種虛實(shí)結(jié)合的方案，將現(xiàn)實(shí)的環(huán)境與虛擬的數(shù)據(jù)相互疊加。當(dāng)然每個地方都會存在自己的問題，這就需要通過針對性的設(shè)計(jì)去解決，讓負(fù)面效果變成正面效果，比如杭州西湖的雨季很長，我們需要解決避免設(shè)備淋濕的問題，但如果我們用一些紙傘進(jìn)行遮擋的話，那么雨天有可能會成為產(chǎn)品意境的一部分?！?/p>

在之前的體驗(yàn)過程中，我充分感受到了基于Vision Pro所營造的虛實(shí)結(jié)合的神奇效果，而在這次交流過程中，更多的創(chuàng)意和可能性不斷在我腦中浮現(xiàn)，這或許就是科技的發(fā)展帶給藝術(shù)乃至整個社會更多的價值所在。我相信《山?？臻g》的面世只是空間計(jì)算與XR應(yīng)用創(chuàng)新大潮中的一次牛刀小試，接下來更多的XR大空間應(yīng)用必將對文旅及更多領(lǐng)域帶來革命性的推動，對此我充滿了期待。

會后，佳能（中國）有限公司副總裁平野英治、佳能股份有限公司影像事業(yè)部IMG開發(fā)統(tǒng)括部高級項(xiàng)目經(jīng)理寺田修一、佳能（中國）有限公司影像信息商務(wù)統(tǒng)括本部項(xiàng)目副總經(jīng)理栗開宇接受媒體采訪，詳細(xì)闡述了佳能在VR領(lǐng)域的戰(zhàn)略布局和未來規(guī)劃。

3D VR升溫，產(chǎn)品技術(shù)創(chuàng)新驅(qū)動沉浸影像進(jìn)化

在采訪中，平野英治首先闡明了佳能對VR市場的高度重視。他指出，3D VR內(nèi)容已成為全球市場矚目的焦點(diǎn)，公眾對其抱有很高的期待。3D VR技術(shù)不僅滿足了創(chuàng)作者的需求，更為觀眾帶來了更為強(qiáng)烈的臨場感和真實(shí)感，從而極大地提升了觀影體驗(yàn)。作為影像解決方案的領(lǐng)先提供商，佳能主要服務(wù)于影像創(chuàng)作者，這些創(chuàng)作者不僅期待3D VR技術(shù)能為他們提供更多創(chuàng)作可能性，還希望為消費(fèi)者帶來前所未有的沉浸式體驗(yàn)。

平野英治進(jìn)一步強(qiáng)調(diào)，佳能致力于通過產(chǎn)品和技術(shù)創(chuàng)新，為VR市場貢獻(xiàn)自己的力量。特別是在2021年，佳能推出了適配3D VR的EOS虛擬現(xiàn)實(shí)系統(tǒng)（EOS VR SYSTEM），并在中國積極參與構(gòu)建VR生態(tài)系統(tǒng)，與眾多硬件、軟件企業(yè)及制作公司建立了深入的合作關(guān)系，共同推動VR行業(yè)的快速發(fā)展。在解決VR拍攝中的光學(xué)性能問題上，佳能充分利用了其長期積累的技術(shù)優(yōu)勢，有效解決了畫質(zhì)、鬼影和白平衡等關(guān)鍵技術(shù)難點(diǎn)，推動產(chǎn)品進(jìn)一步優(yōu)化。

寺田修一重點(diǎn)介紹了EOS虛擬現(xiàn)實(shí)系統(tǒng)的研發(fā)歷程。自2021年推出該系統(tǒng)以來，佳能持續(xù)豐富和完善產(chǎn)品線，以滿足市場的多樣化需求。寺田修一指出，3D VR作為一種全新的敘事和視覺表達(dá)方式，能夠賦予觀眾沉浸式的觀影體驗(yàn)。佳能舉辦VR創(chuàng)作者大會的初衷，正是為了搭建一個交流平臺，讓來自不同領(lǐng)域的生態(tài)企業(yè)和創(chuàng)作者能夠共同探討VR發(fā)展的機(jī)遇，拍攝出更多優(yōu)質(zhì)的VR作品，并借助EOS虛擬現(xiàn)實(shí)系統(tǒng)打造更多成功的案例。

3D VR 180°實(shí)景拍攝，兼顧沉浸感與敘事的新標(biāo)桿

360°還是180°VR？對于創(chuàng)作者來說，這是一個很難做出的抉擇。過去創(chuàng)作者們更加偏向于360°視頻，因?yàn)樗軌蛉轿坏夭蹲綀鼍埃o予觀眾極高的自由度去探索與發(fā)現(xiàn)。然而，隨著VR技術(shù)的不斷成熟與觀眾偏好的逐漸細(xì)化，180°VR視頻正以其獨(dú)特的沉浸感與敘事效率脫穎而出，成為不少創(chuàng)作者的新寵。

在寺田修一看來，相較于360°全景拍攝，180°VR在規(guī)避光線布置與鏡頭穿幫等方面展現(xiàn)出顯著優(yōu)勢，同時因?yàn)橐暯堑目s小更容易讓觀眾將注意力放在到創(chuàng)作者們想要突出呈現(xiàn)的元素，其敘事能力相比360°全景也更為突出。

此外，創(chuàng)作者們往往還會在創(chuàng)作過程中面臨著選擇實(shí)景拍攝還是3D建模的糾結(jié)。寺田修一指出，實(shí)景拍攝與3D建模各具特色。實(shí)景拍攝以其便捷性著稱，尤其擅長捕捉并記錄現(xiàn)實(shí)生活中的珍貴瞬間；而3D建模則在高性能計(jì)算需求方面展現(xiàn)出獨(dú)特優(yōu)勢。在栗開宇看來，對于廣大用戶而言，實(shí)景拍攝無疑是體驗(yàn)VR技術(shù)最為直接且簡便的方式。相比之下，3D建模所涉及的龐大數(shù)據(jù)量與復(fù)雜工程要求，使得其普及門檻相對較高。佳能深知這一點(diǎn)，并因此致力于研發(fā)更輕便的VR設(shè)備，旨在讓更多普通用戶能夠輕松享受到VR技術(shù)帶來的獨(dú)特魅力。

實(shí)景拍攝之外，佳能也在其他影像技術(shù)領(lǐng)域進(jìn)行了廣泛布局，包括體積視頻技術(shù)及基于自動對焦（AF）信息生成3D圖像的創(chuàng)新技術(shù)，期待未來為創(chuàng)作者們提供更多元化的創(chuàng)作選擇。

從專業(yè)到普及，佳能VR要走“雙路徑戰(zhàn)略”

佳能EOS虛擬現(xiàn)實(shí)系統(tǒng)在資深創(chuàng)作者所關(guān)注的關(guān)鍵問題上展現(xiàn)出了卓越的解決方案，但除此之外佳能公司也致力于將其推廣至更廣泛的用戶群體，通過降低VR創(chuàng)作的門檻，使普通用戶也能輕松享受VR體驗(yàn)。

平野英治先生明確指出，佳能的EOS虛擬現(xiàn)實(shí)系統(tǒng)不僅能夠滿足3D VR專業(yè)內(nèi)容的創(chuàng)作需求，其“微單機(jī)身+VR鏡頭”的設(shè)計(jì)思路還允許現(xiàn)有攝影愛好者通過更換VR鏡頭，利用已有的佳能相機(jī)拍攝3D VR影像。這一策略為普通消費(fèi)者提供了便捷、高效的VR創(chuàng)作途徑，進(jìn)一步推動了VR技術(shù)的普及和應(yīng)用。

栗開宇先生進(jìn)一步闡述了佳能在VR市場的“雙路徑戰(zhàn)略”。他指出，佳能VR產(chǎn)品主要面向兩個市場：專業(yè)用戶和普通消費(fèi)者。在專業(yè)用戶方面，佳能專注于滿足商業(yè)和政府等專業(yè)需求，通過提供專業(yè)設(shè)備來助力創(chuàng)作。同時，佳能積極與行業(yè)生態(tài)合作伙伴溝通，以深入了解客戶需求，并提供相應(yīng)的產(chǎn)品、技術(shù)和解決方案，幫助創(chuàng)作者更好地開展業(yè)務(wù)。

在普通消費(fèi)者方面，佳能致力于VR技術(shù)的普及化，通過技術(shù)迭代和產(chǎn)品創(chuàng)新，逐步將專業(yè)設(shè)備上的成熟技術(shù)應(yīng)用到更加輕型的產(chǎn)品上，降低VR創(chuàng)作的門檻，使更多普通用戶能夠接觸并享受VR技術(shù)帶來的樂趣。

老驥“求變”，軟硬兼修綢繆未來

2000年，佳能發(fā)布的EOS D30數(shù)碼單反采用了佳能自研的APS-C畫幅約325萬像素的CMOS傳感器，堪稱最先大力推動CMOS傳感器應(yīng)用的主流相機(jī)廠商，也揭開了CMOS傳感器進(jìn)軍相機(jī)主流市場的大幕。

無獨(dú)有偶的是，面向新興的沉浸影像市場，佳能這個相機(jī)行業(yè)的老牌巨頭，同樣成為了各大廠商“首個吃螃蟹的人”。2021年，佳能推出了適配3D VR的EOS虛擬現(xiàn)實(shí)系統(tǒng)，并開始打造相關(guān)的生態(tài)。2024年，佳能宣布正在研發(fā)支持Apple Vision Pro空間視頻拍攝的RF-S7.8mm F4 STM DUAL 3D 攝影用鏡頭（至發(fā)稿時仍在開發(fā)中），帶來了非常好的市場反饋。

平野英治先生深知，盡管佳能在當(dāng)下相機(jī)市場有著舉足輕重的地位，但在快速變化的科技浪潮中，唯有不斷求變才能保持領(lǐng)先。他強(qiáng)調(diào)，佳能正積極擁抱VR技術(shù)，不僅僅是為了滿足市場的短期需求，更是為了在未來影像領(lǐng)域占據(jù)一席之地。通過VR技術(shù)的融合，佳能希望為創(chuàng)作者打開全新的創(chuàng)作維度，同時也為觀眾帶來前所未有的視覺盛宴。“我們實(shí)際上正在致力于研究各種不同的新的領(lǐng)域，今后還會有相應(yīng)產(chǎn)品推出”。

平野英治還在采訪中提到，佳能正在開發(fā)一款新概念的相機(jī)，這也引起了所有與會者的好奇?！捌鋵?shí)我們在今年已經(jīng)在一些不同的場合展出了一些概念產(chǎn)品，佳能2月份在日本CP+展會，還有5月份在北京的P&E展會上都展出了一臺一體化的小型的概念相機(jī)，它可以讓兩只鏡頭并排拍攝3D 180°VR的影像，也可以將其中一個鏡頭折疊回來拍攝360°的全景影像，這樣一體化的小巧產(chǎn)品更方便用戶去使用，所以我們也正在積極地研發(fā)中”，栗開宇做了更詳細(xì)的解釋。

不難看出，在硬件層面，佳能將繼續(xù)發(fā)揮其在光學(xué)、圖像處理及傳感器技術(shù)上的優(yōu)勢，為VR設(shè)備提供卓越的畫質(zhì)表現(xiàn)和沉浸式體驗(yàn)；同時佳能也在積極探索VR設(shè)備的便攜化、輕量化設(shè)計(jì)，力求讓VR技術(shù)更加貼近普通消費(fèi)者的生活。

而在軟件與生態(tài)系統(tǒng)建設(shè)方面，佳能鼓勵創(chuàng)作者及生態(tài)伙伴共同參與到VR內(nèi)容的創(chuàng)作與分發(fā)中來，形成良性循環(huán)的生態(tài)系統(tǒng)。未來，佳能還將繼續(xù)舉辦業(yè)內(nèi)交流研討活動，為行業(yè)內(nèi)外人士提供交流學(xué)習(xí)的機(jī)會，共同推動VR技術(shù)的發(fā)展與普及。

佳能的這一系列舉措，無疑將為影像技術(shù)開啟一個全新的篇章。正如本次大會主題“開創(chuàng)沉浸視頻新視界”所言，佳能正以前所未有的決心和魄力，引領(lǐng)著行業(yè)的變革，為創(chuàng)作者和觀眾帶來更加豐富、多元的視覺體驗(yàn)。隨著技術(shù)的不斷進(jìn)步和市場的逐漸成熟，我們有理由相信，佳能將在未來的影像世界中占據(jù)一席之地，繼續(xù)書寫其作為影像技術(shù)先鋒的輝煌篇章。

XR技術(shù)向來是ChinaJoy必不可少的元素。在今天一天的行程中，93913拜訪了多家XR相關(guān)的展臺，并做了一個簡單的匯總，如果你對其中展出的產(chǎn)品有興趣，可以直接前往相應(yīng)的展位上進(jìn)行親身的體驗(yàn)。我們想提醒的是，其中有一些展位排隊(duì)時間比較久，需要提前規(guī)劃好逛展的時間。

驍龍XR奇幻之旅

自2018年以來，高通每年都會在ChinaJoy期間設(shè)置一個驍龍主題館，其中展示的產(chǎn)品大多都由高通的芯片驅(qū)動。XR產(chǎn)業(yè)同樣離不開高通芯片的支持，從高性能VR一體機(jī)到追求輕薄小巧的AR眼鏡，高通的身影可謂無處不在。

本屆ChinaJoy上，你可以在驍龍主題館看到不少市面上主流的VR頭顯/AR眼鏡產(chǎn)品。

但在盤點(diǎn)我們看到的這些XR產(chǎn)品之前，不得不提到今天驍龍主題館「最靚的仔」——驍龍XR奇幻之旅。

驍龍XR奇幻之旅最早于2022年8月成都舉辦的驍龍嘉年華上亮相，旨在展示XR技術(shù)與數(shù)字娛樂相結(jié)合帶來的娛樂新體驗(yàn)。無論是驍龍嘉年華還是去年ChinaJoy期間，驍龍XR奇幻之旅都吸引了大量的觀眾前來體驗(yàn)。

今年的驍龍XR奇幻之旅，觀眾們體驗(yàn)到的內(nèi)容又有了更新——高通技術(shù)公司、米哈游與銀河GVR聯(lián)手打造了「驍龍×《崩壞：星穹鐵道》沉浸式XR體驗(yàn)」，其中銀河GVR主要負(fù)責(zé)運(yùn)動座椅和內(nèi)容的制作。

這段體驗(yàn)在今年5月份上海舉辦的「星鐵」嘉年華期間，引起了非常多到場玩家們的追捧，現(xiàn)場排隊(duì)時間一度達(dá)到2個半小時。除了內(nèi)容的更新之外，「驍龍×《崩壞：星穹鐵道》沉浸式XR體驗(yàn)」使用的座椅也與往年使用的球形座椅有所區(qū)別，運(yùn)動角度更大，帶來了更靈活的內(nèi)容設(shè)計(jì)。

在2024 ChinaJoy驍龍主題館里，「驍龍×《崩壞：星穹鐵道》沉浸式XR體驗(yàn)」在場館開放后短短半小時的時間里，已經(jīng)排起了長長的隊(duì)伍，到了中午以后隨著到場觀眾的增多，排隊(duì)人數(shù)也是越來越多，大家都十分好奇用VR頭顯進(jìn)入「星鐵」的世界中是一種什么樣的體驗(yàn)。

「驍龍×《崩壞：星穹鐵道》沉浸式XR體驗(yàn)」將舞臺設(shè)定在了「星鐵」中的「盛會之星」——匹諾康尼，在流螢的私語中，玩家們從熟悉的「入夢」開始，到「黃金時刻」再到「流螢天臺」，親身穿梭于「星鐵」的世界中，或許會體驗(yàn)到不一樣的感動。

當(dāng)然需要說明的一點(diǎn)是，筆者并非「星鐵」的玩家，因此「驍龍×《崩壞：星穹鐵道》沉浸式XR體驗(yàn)」對于筆者來說并沒有帶來強(qiáng)烈的心靈沖擊，但筆者十分能夠理解沉浸到自己熟悉的虛擬世界中是怎樣的感受——作為一名高達(dá)粉絲，筆者此前曾經(jīng)在VR-ZONE體驗(yàn)過「高達(dá)VR:臺場強(qiáng)襲」，被高達(dá)捧在手中升空的時刻，說是接近「熱淚盈眶」也只能算是稍有夸張，但這也正是VR的魅力所在。

一眾XR硬件亮相ChinaJoy展館

同樣是在高通的展區(qū)，有一個展臺專屬于XR硬件，其中展示了多家廠商的最新產(chǎn)品。

雷鳥展示了一體式AR眼鏡雷鳥X2，XREAL展示了剛剛發(fā)布的Beam Pro以及Air 2 Pro AR眼鏡，Rokid展示的是Rokid AR Studio計(jì)算單元+眼鏡套裝。

PICO和NOLO則分別展示了PICO 4 Pro以及NOLO Sonic 2。

此外，玩出夢想也在現(xiàn)場展示了最新發(fā)布的空間計(jì)算機(jī)「玩出夢想MR」，不過這臺設(shè)備在現(xiàn)場暫時沒有提供體驗(yàn)。此前我們曾前往玩出夢想總部實(shí)際上手使用了這臺設(shè)備的部分功能，大家可以參考此文「玩出夢想MR亮相新加坡：AVP的空間計(jì)算獨(dú)角戲，終于迎來重量級對手」中的相關(guān)部分，需要注意的是，隨著玩出夢想MR后續(xù)在軟件方面的迭代，其中的體驗(yàn)可能會發(fā)生變化。

而在高通展區(qū)外，星際魅族的展區(qū)則展示了去年發(fā)布的MYUV智能眼鏡標(biāo)準(zhǔn)版。想要體驗(yàn)這款產(chǎn)品的人也是排成了長隊(duì)，筆者在上手前大約等待了20-30分鐘的時間。

從外觀來看，MYUV標(biāo)準(zhǔn)版的優(yōu)點(diǎn)在于輕盈，43克的重量的的確確對鼻梁不會產(chǎn)生任何的壓力，外觀來看也只有鏡腿部分稍粗，但正面看過去漏光的現(xiàn)象依然比較明顯。應(yīng)用方面，AR眼鏡的經(jīng)典套件實(shí)時翻譯、題詞、導(dǎo)航功能全都具備，體驗(yàn)下來后和其他品牌AR眼鏡在功能體驗(yàn)上沒有太大的差異。

單色MicroLED眼鏡主打功能性，就目前筆者體驗(yàn)過的所有單色顯示的AR眼鏡來說，在題詞、翻譯等功能方面仍然有提升的空間，MYUV標(biāo)準(zhǔn)版自然也不例外。對于想要購買這類產(chǎn)品的用戶來說，功能應(yīng)當(dāng)是貴精不貴多，期待未來此類AR眼鏡在產(chǎn)品迭代時能夠更注重第一方應(yīng)用的開發(fā)。

除了MYUV標(biāo)準(zhǔn)版，在中國聯(lián)通的展區(qū)，奇點(diǎn)臨近（QIDI）展示了其與中國聯(lián)通合作研發(fā)的QIDI Vida智能運(yùn)動眼鏡。這款產(chǎn)品近期正在Indiegogo上進(jìn)行眾籌，目前有近1000人在平臺上下單進(jìn)行了購買。

QIDI Vida是一款少見的瞄準(zhǔn)運(yùn)動賽道的雙目全彩AR眼鏡，重量約為60克，其最大的特點(diǎn)在于支持全語音控制，滿足騎行等場景下用戶的使用需求。

現(xiàn)場筆者花了不少的時間來測試語音控制的功能，整體上來說，在ChinaJoy展館嘈雜的環(huán)境中依然保持了優(yōu)秀的準(zhǔn)確率，但識別的關(guān)鍵字目前來看是事先設(shè)定好的，例如當(dāng)系統(tǒng)彈出一個對話框，我們并不能根據(jù)對話框上顯示的文字和系統(tǒng)進(jìn)行交互，而是需要通過“確定”指令來選擇對話框上的按鈕。因此我們暫時還不能像與GPT對話那樣來與系統(tǒng)進(jìn)行交互。

QIDI Vida的另一個特點(diǎn)則是加入了對于5G網(wǎng)絡(luò)的支持，能夠通過eSIM卡接入網(wǎng)絡(luò)從而脫離手機(jī)使用。

從機(jī)內(nèi)安裝的應(yīng)用來看，QIDI Vida能夠兼容相當(dāng)數(shù)量的應(yīng)用，可以支持AR導(dǎo)航、實(shí)時翻譯、識物、拍照。甚至筆者還發(fā)現(xiàn)了微信的身影，目前在QIDI Vida中打開微信后為掃碼登陸的頁面，還沒有針對性的優(yōu)化。

除此之外，QIDI Vida還在鼻托的位置增加了許多傳感器，可以用來監(jiān)控心率、血氧等指標(biāo)，很適合運(yùn)動中使用。

VR大空間體驗(yàn)「秦潮覺醒」展館受熱捧，文化+潮流=？

「秦潮覺醒」由上海瓣鼎網(wǎng)絡(luò)科技有限公司開發(fā)，是近期上海備受關(guān)注的一款大空間體驗(yàn)，將秦朝和先秦文化元素融入VR的體驗(yàn)中，給人帶來新奇的感覺。

在前往參加今年的ChinaJoy之前，我們特地前往「秦潮覺醒」的線下門店進(jìn)行了實(shí)際的體驗(yàn)。從制作水準(zhǔn)來說，「秦潮覺醒」無疑是頂尖的一批，無論在內(nèi)容設(shè)計(jì)時對于空間的復(fù)用、還是對于大空間場景下定位系統(tǒng)的駕馭能力都十分出色。

這里我們并不想做太多的劇透，只聊聊一些劇情無關(guān)的體驗(yàn)吧。從文化元素上來說，「秦潮覺醒」融入了兵馬俑、山海經(jīng)、周易等歷史文化內(nèi)容，與末日廢土、賽博朋克等具備科技感的科幻元素做了一定的結(jié)合，嘗試著將中國古典文化以更潮流、更年輕化的方式進(jìn)行呈現(xiàn)。

根據(jù)介紹，整個「秦潮覺醒」的故事會分為三個章節(jié)發(fā)布，目前「秦潮覺醒」可供體驗(yàn)的僅有整個故事的第一個章節(jié)，在第一章節(jié)的結(jié)尾體驗(yàn)者必須做出一個抉擇，根據(jù)大家選擇的不同，后續(xù)的故事將走向不同的結(jié)局。這也是我們在市面上見到以連續(xù)劇的方式推出的VR大空間體驗(yàn)。

自從「消失的法老」和「風(fēng)起洛陽VR」去年陸續(xù)在上海爆紅，VR大空間技術(shù)與文旅結(jié)合的潛力開始被市場關(guān)注，越來越多依托于歷史文化的大空間項(xiàng)目開始站到聚光燈下，例如基于三星堆的「哇嗚！三星堆」、基于秦始皇陵的「隱秘的秦陵」、基于盛唐洛陽的「唐宮夜宴」等等。

除了「秦潮覺醒」近期上海市內(nèi)也有「消失的法老」同一團(tuán)隊(duì)制作的「永恒圣母院」，以及由知名VR工作室Felix&Paul和PHI工作室聯(lián)合基于國際空間站實(shí)拍資料以及艾美獎獲獎作品「太空探索者：國際空間站體驗(yàn)」制作的「無限The Infinite」等等VR大空間體驗(yàn)上線，稱得上十分的熱鬧。

ChinaJoy現(xiàn)場，「秦潮覺醒」展位排隊(duì)等待體驗(yàn)的觀眾可以說是里外三層將展位包圍的水泄不通。除了「秦潮覺醒」的VR體驗(yàn)外，展位上贈送的周邊產(chǎn)品也很受觀眾們喜愛，不僅有「秦潮覺醒」中出自山海經(jīng)形象的角色玩偶，還有打開過程酷似考古發(fā)掘的盲盒，十分契合兵馬俑的元素。

在展位上，我們見到了瓣鼎的創(chuàng)始人史明，并進(jìn)行了簡單的交流。在史明看來，「秦潮覺醒」是與「消失的法老」完全不同類型的作品，相比「消失的法老」大量的科普，「秦潮覺醒」更重注作品的娛樂屬性，以求抓住年輕群體的興趣點(diǎn)。對于「秦潮覺醒」后續(xù)的內(nèi)容更新，史明表示將借鑒電影「魔戒三部曲」的形式來打造「秦潮覺醒」的體驗(yàn)

在進(jìn)入VR大空間賽道前，瓣鼎的主要業(yè)務(wù)是潮品以及元宇宙相關(guān)的線上業(yè)務(wù)，例如陳冠希創(chuàng)辦的CLOT品牌就和瓣鼎有業(yè)務(wù)上的合作。在史明的想法中，線下的VR大空間能夠更好的將元宇宙這個概念向消費(fèi)者群體中普及。在商業(yè)模式上，「秦潮覺醒」除了采取直營+加盟的形式，還將圍繞自身IP推出更多具備潮品屬性的周邊產(chǎn)品。

體感服、智能手套層出，隱形VIP當(dāng)屬VRChat

在今年ChinaJoy的eSmart展館，我們見到了好幾家XR的外設(shè)廠商，其中也不乏新的面孔。

HIG VR展示了數(shù)量眾多的外設(shè)，包括了智能手套、VR手柄的槍托支架以及各種適配VR頭顯的體感槍。

擺在最顯眼的位置的，是型號為「QBZ-191」的體感槍械，外觀十分逼真，主要面向一些特殊的B端客戶推出。

我們在展位上體驗(yàn)了HIG VR最新的智能手套產(chǎn)品，戴上手套后，這款產(chǎn)品可以精確的追蹤我們雙手十指每一個關(guān)節(jié)的運(yùn)動，可以在VR中實(shí)現(xiàn)逼真的物理交互。

宇疊智能科技有限公司同樣推出了一款智能手套產(chǎn)品。根據(jù)宇疊智能介紹，該款智能手套產(chǎn)品的特點(diǎn)在于使用了柔性傳感器，同時還將產(chǎn)品的售價降低到了4000元以下，讓消費(fèi)者能夠以更低的成本使用。

福州的宜亨科技有限公司展示了True Gear觸介體感服，內(nèi)置了40個由電機(jī)馬達(dá)驅(qū)動的觸電，帶來更精確細(xì)致的觸覺反饋。比較有意思的是這款體感服還配備了2個電刺激模塊，佩戴在肘部靠上的位置，可以通過電流刺激肌肉讓其收緊，從而模擬槍械產(chǎn)生的后坐力。

不過最有意思的還是這三個品牌的產(chǎn)品或多或少的都提到了在VRChat中的使用。智能手套可以讓VRChat的用戶更好的通過手勢來表達(dá)情感，比如用國際通用手勢問個好什么的，比目前VR手柄能夠識別的手勢要豐富自由，而體感服則是讓VRChat的用戶感受到別人對你的觸碰。

越來越接近電影「頭號玩家」里展現(xiàn)的場景了，不是嗎？

寫在最后

受限于時間關(guān)系，我們在首日并沒有逛完全部的展館，現(xiàn)場還有更多的廠商也有XR相關(guān)的產(chǎn)品展示。

比如在倍升互聯(lián)的展位上，兩臺Vision Pro也是吸引了非常多的觀眾排隊(duì)進(jìn)行體驗(yàn)，倍升互聯(lián)提供了Vision Pro開發(fā)相關(guān)的課程和培訓(xùn)。此外還有網(wǎng)易影核、當(dāng)紅齊天SoReal等等大家已經(jīng)非常熟悉的廠商也展示了最新的業(yè)務(wù)進(jìn)展。

從規(guī)模上來看，今年ChinaJoy參展的XR廠商相比去年的確有所縮減，但是從現(xiàn)場觀眾對于XR產(chǎn)品的關(guān)注程度來說，Vision Pro與空間計(jì)算、具備AI功能的AR眼鏡、極致的VR娛樂體驗(yàn)都是觀眾們樂于花費(fèi)較長時間排隊(duì)去體驗(yàn)的項(xiàng)目。

只要消費(fèi)者們能夠保持持續(xù)的關(guān)注，我們就有理由相信，隨著技術(shù)的不斷進(jìn)步和市場的逐漸成熟，XR將在未來我們帶來更多令人期待的變革和驚喜！

早在2016年，我們就開始談?wù)摼€上購物可以如何結(jié)合VR/AR技術(shù)帶來顛覆性的體驗(yàn)。阿里和京東作為當(dāng)時唯二的電商巨頭，都圍繞著VR和AR技術(shù)做了許多的探索。

當(dāng)年，阿里的淘寶BUY+宣傳視頻引起了廣泛的關(guān)注，讓消費(fèi)者在VR頭顯中體驗(yàn)沉浸式的購物，被視為未來主流的購物方式，但淘寶BUY+僅在2016年的雙十一期間經(jīng)歷了十幾天的短暫開放便匆匆下線，徹徹底底的成為了一個噱頭。

京東緊隨阿里的步伐，面向VR/AR領(lǐng)域推出了對標(biāo)Buy+的天工計(jì)劃，希望用3D建模+AI的方式，探索VR購物的未來。不過相比VR而言，AR技術(shù)在京東天工計(jì)劃的整個生命周期中扮演了更加重要的角色，例如手機(jī)端的京東App為美妝類的產(chǎn)品提供了AR試妝的功能，幫助消費(fèi)者更好的完成購物決策。

但后續(xù)隨著VR行業(yè)走向沉寂，兩家平臺對VR/AR的探索也似乎停滯。

今年2月份，蘋果Vision Pro在美國開售。高規(guī)格的空間計(jì)算硬件，再次引起了這兩個電商巨頭的興趣。

在3月初我們發(fā)布的文章中曾經(jīng)提到過，阿里在Vision Pro上會有比較大的動作。4月份，淘寶Vision Pro 1.0版本上線，但這個版本僅僅提供了用Vision Pro進(jìn)行淘寶購物的體驗(yàn)和演示，并不能真正下單購買，引起的關(guān)注依然十分有限。

近日，Vision Pro版淘寶迎來了2.0版本的大更新，打通了支付購買的環(huán)節(jié)，從原先只能看不能買的概念展示，搖身一變成為了一款真正的購物軟件。

巧合的是，京東也趕在Vision Pro國行正式發(fā)售之際，推出了京東.Vision應(yīng)用，嘗試著用空間計(jì)算這項(xiàng)新技術(shù)，來重塑線上的購物體驗(yàn)。

在體驗(yàn)完淘寶和京東的Vision Pro版之后，我們發(fā)現(xiàn)，用Vision Pro來網(wǎng)購，還真有一些體驗(yàn)是手機(jī)無法比擬的。如果Vision Pro后續(xù)能夠?qū)r格搞下去，提高普及率，「空間計(jì)算+網(wǎng)購」或許還真能成為國區(qū)的Killer App。

打開淘寶Vision Pro版，首先映入眼簾的，是琳瑯滿目的各類電器和家電產(chǎn)品。最上方醒目的Banner位給到了大疆，會有一臺大疆無人機(jī)的3D模型懸浮在頁面外。

沒錯，Vision Pro版淘寶相比手機(jī)版的一大區(qū)別，在于其充分利用了Vision Pro的空間計(jì)算能力，將商品以3D模型的形式疊加顯示在現(xiàn)實(shí)環(huán)境中。

只要一款商品提供了3D模型的展示，在你點(diǎn)進(jìn)商品的詳情頁面后淘寶Vision Pro版就會將其顯示在頁面前。你可以隨意的拖動和縮放這個3D模型，從各個角度去觀察它的外觀。

3D模型下方有一個浮動工具條，上面有一個「1:1」按鈕，當(dāng)你按下它，商品就會按照1:1的真實(shí)尺寸出現(xiàn)在空間中。你可以將其放在你喜歡的位置上，提前感受一下將這款商品買回家后的體驗(yàn)。

以往我們在網(wǎng)上購買家電、家具、數(shù)碼產(chǎn)品甚至是桌面擺件與裝飾物等商品之前，大多時候只能腦補(bǔ)東西買回來并擺放到位后的模樣，即使你在下單前去實(shí)體店實(shí)地考察，也可能會碰上電商專供的型號無功而返。一旦發(fā)現(xiàn)買回來的東西尺寸或者外觀不是特別滿意，可能就會需要承擔(dān)一筆不少的退貨費(fèi)用。

現(xiàn)在通過Vision Pro，我們可以提前將3D模型擺放到對應(yīng)的位置上，逼真程度接近99.99%，大幅度降低了消費(fèi)者網(wǎng)購家具、家電、數(shù)碼產(chǎn)品、擺件與裝飾物等品類商品的決策難度，進(jìn)而減少因?yàn)閷?shí)物與圖片在尺寸、外觀等方面的一些感官差異帶來的退貨，無論對于商家還是消費(fèi)者來說都能節(jié)省許多時間成本和資金成本。

你甚至可以和3D模型做一些簡單的交互，例如打開這款鋼鐵俠的面罩看一看內(nèi)部的結(jié)構(gòu)，也可以看到商品的具體尺寸信息。

或者將同一款產(chǎn)品不同型號的模型一起顯示方便挑選。

也許你會覺得，1:1 3D模型的展示功能，手機(jī)淘寶結(jié)合手機(jī)的AR功能也能夠?qū)崿F(xiàn)。實(shí)際上，這只是淘寶Vision Pro版的開胃小菜，還有更重磅的功能值得關(guān)注。

剛才我們提到了大疆醒目的出現(xiàn)在了淘寶Vision Pro版首頁的Banner位，并且在頁面上還懸浮了一款大疆無人機(jī)的3D模型。當(dāng)你點(diǎn)擊這一區(qū)域時，并不會直接進(jìn)入大疆無人機(jī)的商品詳情頁，而是進(jìn)入了名為「大疆新品空間」的沉浸式體驗(yàn)。

目前這一沉浸式體驗(yàn)的主角是大疆無人機(jī)的新品MINI 4 PRO，體驗(yàn)綜合3D模型動畫、視頻與圖文內(nèi)容，用戶可以在其中了解這款產(chǎn)品的避障、智能回航以及與其他型號產(chǎn)品的詳細(xì)參數(shù)對比等等內(nèi)容。

可以說，相比簡單的展示一個1:1的3D模型，這種更具互動性的體驗(yàn)，才是淘寶Vision Pro版與手機(jī)淘寶體驗(yàn)的分水嶺。

除了大疆之外，小米SU7也將在淘寶Vision Pro版上通過這一功能提供一場虛擬試駕體驗(yàn)，目前正處在預(yù)約的階段，待正式開放后我們也將第一時間進(jìn)行體驗(yàn)。

除了沉浸式體驗(yàn)，淘寶Vision Pro版正嘗試著用空間視頻取代平面的商品宣傳視頻。在視頻頁卡下，我們可以看到服飾、化妝品甚至是飲料類商品的空間視頻版宣傳片。其中尤其是服飾類的空間視頻，立體的呈現(xiàn)了服飾的上身效果，體驗(yàn)感拉滿。

除了圍繞著空間計(jì)算加入的這些新功能，淘寶Vision Pro版也很好地將手機(jī)淘寶的核心功能進(jìn)行了復(fù)刻，例如淘寶Vision Pro版同樣支持旺信聊天，可以在下單前后與店家進(jìn)行溝通；

支持搜索功能，手機(jī)淘寶能夠搜索到的商品在Vision Pro上都能夠搜索到，實(shí)現(xiàn)了全面的數(shù)據(jù)互通，還能夠直接通過Vision Pro相機(jī)拍攝的照片對實(shí)物進(jìn)行搜索；

可以查看待付款訂單、已付款訂單和歷史訂單，但目前還無法查看物流相關(guān)信息。

支持加購物車，但是只有手機(jī)淘寶能夠?qū)徫镘囘M(jìn)行操作。

在支付方面，目前淘寶Vision Pro版目前沒有直接在Vision Pro中付款的方式。消費(fèi)者可以在登陸同一賬號的情況下在手機(jī)支付寶上開通500元以下商品免密支付。不開通免密支付或者金額超過500元的訂單則會將付款信息推送到手機(jī)端的淘寶應(yīng)用上，通過手機(jī)完成支付。

接下來我們聊聊京東.Vision體驗(yàn)。整體來說，京東.Vision可以看作是一個功能不完全的Vision Pro版淘寶，但在一些功能的細(xì)節(jié)上也有自己的特色。

京東.Vision目前只有一個商品推薦頁面，無法自由搜索商品，只能訪問頁面上所呈現(xiàn)的商品。這個推薦頁面可以顯示3D模型和空間視頻，與淘寶Vision Pro版的推薦頁面幾乎完全一致。

京東.Vision能夠支持在空間中查看商品的3D模型，可以進(jìn)行拖拽、縮放等簡單的交互，還支持播放模型動畫。

相比Vision Pro版淘寶，京東.Vision可以支持將兩件不同品牌商品的3D模型同時呈現(xiàn)，方便消費(fèi)者進(jìn)行對比。

還可以便捷的在3D模型上顯示商品的長寬高實(shí)際尺寸數(shù)據(jù)，不再需要消費(fèi)者去翻冗長的商品詳情頁面。

京東.Vision支持將商品加入到購物車中，并且可以在Vision Pro上直接對購物車進(jìn)行操作，在真正決定下單時一次性付款。

在支付方面，京東.Vision可以直接在Vision Pro上通過輸入密碼使用登陸京東賬號綁定的支付方式，不需要消費(fèi)者在手機(jī)京東App上完成任何操作。

簡單總結(jié)一下，淘寶Vision Pro版可以稱得上是在手機(jī)淘寶的基礎(chǔ)之上，加入了商品3D模型空間展示、空間視頻版商品宣傳視頻以及沉浸式商品交互體驗(yàn)，利用空間計(jì)算的優(yōu)勢在一些商品品類上帶來了更好、更低成本的購物體驗(yàn)。

京東.Vision目前還是一個半成品的購物應(yīng)用，整體使用體驗(yàn)與淘寶Vision Pro版相近，但在一些購物體驗(yàn)的細(xì)節(jié)上也有著自己的思考，讓我們十分期待未來完整體驗(yàn)的上線。

Vision Pro自發(fā)售以來，一直被人們詬病內(nèi)容生態(tài)不夠豐富，在許多消費(fèi)者手中淪為了一個看片神器。

淘寶Vision Pro版和京東.Vision的出現(xiàn)，為消費(fèi)者找到了一個使用Vision Pro的新理由：用手機(jī)在網(wǎng)上買買買固然很爽，但是與空間計(jì)算結(jié)合的網(wǎng)上買買買，在一些品類上提供了更爽的購物體驗(yàn)。

經(jīng)濟(jì)學(xué)中認(rèn)為，人們的消費(fèi)行為是理性和感性的統(tǒng)一。感性消費(fèi)注重產(chǎn)品所引起的感官愉悅，這在某種程度上與手機(jī)網(wǎng)購向「空間計(jì)算+網(wǎng)購」的升級不謀而合。更爽的購物體驗(yàn)為商品帶來了更多的情緒價值，也帶來了更多的購買轉(zhuǎn)化。

從實(shí)際體驗(yàn)來看，阿里和京東在Vision Pro的網(wǎng)購體驗(yàn)上花了不少的心思，果然是「行家一出手，就知有沒有」。至少從我個人的角度來說，在買一些大件商品時，會更傾向于通過Vision Pro而不是手機(jī)進(jìn)行選購。

這也讓我們對空間計(jì)算的未來更有信心了，當(dāng)越來越多的廠商開始為空間計(jì)算推出體驗(yàn)升級的新應(yīng)用，消費(fèi)者才會越來越有動力去嘗鮮目前還很昂貴的新產(chǎn)品。

過去人們經(jīng)常會探討硬件與內(nèi)容生態(tài)之間「先有雞還是先有蛋」的問題，但或許先后并不那么重要，更重要的是雞和蛋做好自己該做的事情：雞要做的是生出更多蛋，蛋要做的是努力發(fā)育和成長。

空間計(jì)算并非是對XR技術(shù)的簡單包裝，而是以3D為中心對計(jì)算形式的重構(gòu)，其核心是使用AI、計(jì)算機(jī)視覺（CV）和擴(kuò)展現(xiàn)實(shí)技術(shù)，讓虛擬的體驗(yàn)擺脫屏幕的束縛，融入到現(xiàn)實(shí)的世界中。

正如「The Infinite Retina」一書中所寫，“隨著空間計(jì)算，即第四范式的出現(xiàn)，計(jì)算不再局限于小屏幕，而是無處不在。我們將空間計(jì)算定義為人類、虛擬生物或機(jī)器人能在其中自由移動的計(jì)算，包括此前曾被定義的環(huán)境計(jì)算、普適計(jì)算或混合現(xiàn)實(shí)等等多種概念?！?/span>

2023年6月，蘋果在WWDC上發(fā)布的Vision Pro，向人們展示了「七年磨一劍」的高水準(zhǔn)空間計(jì)算硬件，為「空間計(jì)算是下一代計(jì)算平臺」的論斷提供了強(qiáng)有力的背書。

而聚焦國內(nèi)，多家XR廠商紛紛宣布跟進(jìn)空間計(jì)算，并在硬件上向蘋果看齊。在這些廠商中，走得最快的無疑正是「玩出夢想科技」。

2023年9月，玩出夢想科技追隨蘋果Vision Pro的步伐，宣布完成品牌和產(chǎn)品線升級，由之前單一的VR產(chǎn)品線延展到以空間計(jì)算設(shè)備為核心的多產(chǎn)品線發(fā)展。短短10個月后，玩出夢想科技的空間計(jì)算Level Up戰(zhàn)略，就已經(jīng)率先開花結(jié)果。

2024年6月25日，玩出夢想科技在新加坡舉辦全球新品發(fā)布會，推出了全球首款安卓系統(tǒng)空間計(jì)算機(jī)——玩出夢想MR。這也是目前市面上，第一款能夠在核心指標(biāo)上與蘋果Vision Pro對標(biāo)的一體式空間計(jì)算設(shè)備。

玩出夢想科技創(chuàng)始人黃鋒在發(fā)布會上表示：“人類已經(jīng)不再滿足于二維信息，信息的載體正在從二維走向三維。移動互聯(lián)網(wǎng)的下半場，恰恰是空間計(jì)算機(jī)的上半場?？臻g計(jì)算蘊(yùn)藏巨大的商業(yè)機(jī)會，所有的二維應(yīng)用都將迎來三維的升級迭代。”

巧合的是，蘋果Vision Pro將在3天后，于6月28日正式在中國、新加坡與日本發(fā)售。這也讓我們不禁好奇，當(dāng)玩出夢想MR正面遇上蘋果Vision Pro，是否會擦出什么別樣的火花。

93913有幸提前體驗(yàn)到了這款空間計(jì)算機(jī)，并和玩出夢想科技首席技術(shù)工程師張騰博士、玩出夢想科技CMO朱然，聊了聊玩出夢想MR誕生的幕后技術(shù)故事。

對標(biāo)蘋果Vision Pro，玩出夢想MR實(shí)機(jī)體驗(yàn)究竟如何？

6月14日上海的玩出夢想科技總部，我們在大約20分鐘的時間里，體驗(yàn)了玩出夢想MR這款設(shè)備方方面面的功能。

需要提前說明的是，我們體驗(yàn)到的玩出夢想MR僅是一臺工程機(jī)，有部分功能并未開放。僅從我們體驗(yàn)到的部分來看，玩出夢想MR是目前國內(nèi)最高水準(zhǔn)的空間計(jì)算機(jī)，在視覺、追蹤與三維重建等核心功能和體驗(yàn)上，已經(jīng)能夠接近或持平蘋果Vision Pro，雖然存在一些優(yōu)化中的細(xì)節(jié)，但等到這臺空間計(jì)算機(jī)正式開售時，我們相信會有令人驚艷的使用體驗(yàn)提供給消費(fèi)者。

此外還要說明的是，因保密的需要，這次體驗(yàn)現(xiàn)場無法拍攝任何照片，這里只能以文字的形式來向大家說明。

首先聊聊佩戴感受，玩出夢想MR采用了后置電池的設(shè)計(jì)，因此擁有了更好的重量平衡，戴在頭上相比Vision Pro而言沒有那么壓臉，轉(zhuǎn)動也更加自如。在20分鐘的使用時間里，我們沒有感受到任何的負(fù)擔(dān)，在摘下頭顯時，也沒有出現(xiàn)摘下Vision Pro時那種如釋重負(fù)的輕松感。

當(dāng)玩出夢想MR的畫面點(diǎn)亮后，我們可以通過其彩色VST功能看到周圍的環(huán)境。得益于雙目8K Micro-OLED屏幕帶來的超高分辨率，從視覺效果來說玩出夢想MR算得上目前國內(nèi)彩色VST做得最好的一臺設(shè)備，做到了讓現(xiàn)實(shí)世界通過屏幕清晰的呈現(xiàn)在眼前。

我們戴著玩出夢想MR四處走動、快速的轉(zhuǎn)動頭部也不會出現(xiàn)眩暈的感覺，可以輕松的拿取現(xiàn)實(shí)中的任何物品，這足以證明其對延遲和畸變的處理非常優(yōu)秀。在清晰度、延遲和畸變方面，玩出夢想MR可以說與蘋果Vision Pro幾乎不相上下。

交互方面，玩出夢想MR也向Vision Pro看齊，在設(shè)備右上方的位置設(shè)計(jì)了一個可旋轉(zhuǎn)的按鈕，按一下即可呼出主菜單界面，也可以旋轉(zhuǎn)調(diào)節(jié)音量和沉浸環(huán)境。

App的關(guān)閉、移動和縮放UI、主菜單圓形的圖標(biāo)與三行式的排列也充分的說明了這是一款全面對標(biāo)Vision Pro的產(chǎn)品。

玩出夢想MR不僅具備眼球追蹤和手部追蹤功能，同時還能夠支持手柄交互。這一點(diǎn)在玩出夢想科技更早推出的設(shè)備——YVR 2上搭載的手部追蹤功能就可見一斑。延遲不高并且十分穩(wěn)定，相信這一功能在硬件規(guī)格更高的玩出夢想MR上也會有相同甚至更好的表現(xiàn)。

在SLAM和手柄追蹤方面，玩出夢想科技的YVR 1和YVR 2兩臺VR一體機(jī)此前就已經(jīng)給我們留下了深刻的印象，玩出夢想MR同樣延續(xù)了這一優(yōu)點(diǎn)——定位精準(zhǔn)，低延遲不漂移，手柄交互如臂使指。

精準(zhǔn)的SLAM能力是實(shí)現(xiàn)空間計(jì)算的必要條件，而手柄的準(zhǔn)確低延遲定位對于需要操作精度和反應(yīng)速度的沉浸式游戲等娛樂體驗(yàn)來說，無疑加分不少，也讓玩出夢想MR能夠勝任從生產(chǎn)力到游戲娛樂的廣泛使用場景。

另一個對于空間計(jì)算來說十分重要的能力——空間錨點(diǎn)，玩出夢想MR表現(xiàn)同樣優(yōu)秀。在現(xiàn)場的體驗(yàn)中，房間內(nèi)的墻壁上被錨定了一個虛擬的魚缸和一塊虛擬的屏幕，無論如何走動，這兩個虛擬物體都能穩(wěn)穩(wěn)的固定在原位。根據(jù)現(xiàn)場工作人員的介紹，目前玩出夢想MR的空間錨點(diǎn)可以達(dá)到亞厘米級的精度，在數(shù)百平方米的范圍內(nèi)隨意移動不會丟失。

伴隨著空間錨點(diǎn)體驗(yàn)而來的，是對于空間音頻的支持。當(dāng)我們靠近場景中的虛擬屏幕或者虛擬魚缸時，聲音的大小和指向的方向也會跟隨著距離和方位的改變發(fā)生相應(yīng)的變化，增強(qiáng)了空間應(yīng)用的沉浸感。

在內(nèi)容和應(yīng)用方面，我們分別體驗(yàn)了空間觀影、空間游戲、3D空間拍攝和輕辦公，從我們體驗(yàn)到的部分來看，這些內(nèi)容和應(yīng)用與Vision Pro上的基本處于同一水準(zhǔn)。

空間觀影支持8K分辨率的視頻播放，在空間音頻的加持下能夠很好地滿足沉浸式觀影的需求。據(jù)悉，玩出夢想科技已成為IMAX以及DTS在空間計(jì)算及混合現(xiàn)實(shí)領(lǐng)域的全球首個戰(zhàn)略合作伙伴，這更令人期待新品正式發(fā)售后將帶來的空間觀影與視聽體驗(yàn)。

此外，空間游戲定位穩(wěn)定交互流暢，加上高清晰度、低延遲彩色VST，提供了打破虛實(shí)的空間游戲體驗(yàn)；3D空間視頻錄制和回放立體感出色，還在拍攝中加入了防抖和美顏功能，更適應(yīng)國內(nèi)消費(fèi)者的需求；大屏辦公實(shí)現(xiàn)了與PC間的低延遲無線串流，文字等內(nèi)容顯示清晰滿足辦公需要。

值得一提的是，盡管雙目8K的分辨率對于芯片的渲染性能帶來了極大的考驗(yàn)，但玩出夢想MR在第二代高通驍龍XR2+的加持下，最大程度的保證了內(nèi)容和應(yīng)用的高幀率運(yùn)行：無論觀影、空間視頻拍攝還是空間游戲，整個體驗(yàn)的過程十分絲滑，沒有出現(xiàn)卡頓的情況。

「為用戶提供美好體驗(yàn)」，用技術(shù)驅(qū)動空間計(jì)算的用戶價值

在探討計(jì)算范式的演進(jìn)時，我們見證了從PC時代到智能手機(jī)時代，再到當(dāng)今備受矚目的空間計(jì)算時代的重大轉(zhuǎn)變。每一次技術(shù)的飛躍，不僅僅是設(shè)備的更新?lián)Q代，更是人類與信息交互方式的革命性演進(jìn)。

PC時代，人們在固定的工作站前與數(shù)字化信息進(jìn)行交互，信息呈現(xiàn)為靜態(tài)的二維平面，交互模式相對單一；手機(jī)時代，技術(shù)的演進(jìn)打破了空間的限制，使得信息獲取和處理變得隨時隨地，交互方式更加個性化和即時化，盡管信息的呈現(xiàn)依然以平面為主；而到了空間計(jì)算時代，它將徹底重塑我們對信息的感知和操作。在這個時代，三維信息的無縫獲取和處理將成為可能，打破現(xiàn)實(shí)與數(shù)字世界的界限，重構(gòu)我們的生產(chǎn)工具和娛樂方式。

這與玩出夢想科技創(chuàng)始人黃鋒打造玩出夢想MR的理念不謀而合：站在科技與人文的十字路口，為用戶提供美好體驗(yàn)，也就是TPMF（Technology product market Fit），就是技術(shù)產(chǎn)品市場契合度。從用戶價值角度來說，就是應(yīng)當(dāng)幫助用戶提升效率、為用戶創(chuàng)造快樂。

在具體的實(shí)現(xiàn)路徑上，玩出夢想科技所走的，是技術(shù)驅(qū)動產(chǎn)品，這也是刻在玩出夢想科技骨子里的DNA。

自2020年創(chuàng)立以來，玩出夢想科技在四年的時間里發(fā)布了三款自研XR設(shè)備，在頭手6DoF、VSLAM、光學(xué)等領(lǐng)域均采用自研方案且達(dá)到了全球領(lǐng)先水平。團(tuán)隊(duì)研發(fā)人員占比高達(dá)70%，涵蓋算法、硬件、光學(xué)、工業(yè)設(shè)計(jì)和軟件等領(lǐng)域，是全球領(lǐng)先的擁有全棧研發(fā)能力的空間計(jì)算機(jī)企業(yè)。

在采訪中，玩出夢想科技首席技術(shù)工程師張騰從提升效率和創(chuàng)造快樂兩個方面，向我們闡述了一臺頂尖空間計(jì)算機(jī)的誕生過程。

在張騰看來，玩出夢想科技為空間計(jì)算機(jī)構(gòu)建了三大基礎(chǔ)能力：

第一個能力是讓設(shè)備感知人的操作意圖的能力，需要被稱為跟蹤模塊，包括頭部跟蹤、手柄跟蹤、手部26DoF跟蹤、眼動跟蹤這些底層技術(shù)；

傳統(tǒng)的SLAM技術(shù)一直是玩出夢想科技的強(qiáng)項(xiàng)，其自研水平在國內(nèi)廠商中處于領(lǐng)先地位。而在新一代的空間計(jì)算機(jī)產(chǎn)品中，除了優(yōu)秀的SLAM能力，高精度的眼動追蹤也將成為標(biāo)配，并且眼動與手勢的結(jié)合會成為交互設(shè)計(jì)的工作重點(diǎn)之一。

具體而言，高精度的眼動跟蹤可以幫助進(jìn)行應(yīng)為預(yù)測、實(shí)現(xiàn)小樣本的身份識別，讓用戶在佩戴設(shè)備時免去手動輸入密碼登錄的過程，還可以進(jìn)行注視點(diǎn)渲染，大幅度降低GPU及其他計(jì)算資源的消耗，也能夠解決游瞳問題，讓用戶看到的畫面更加真實(shí)自然。

玩出夢想科技一直以來擁有深厚積累的手柄跟蹤能力也沒有被剔除出整個交互體系外。在需要低延遲和超高精度的應(yīng)用中，如第一人稱射擊游戲，張騰認(rèn)為手柄仍然是必不可少的，因此被保留。

第二個能力是把現(xiàn)實(shí)世界數(shù)字化的能力，對應(yīng)玩出夢想科技開發(fā)的空間視頻和地圖模塊。這一能力讓用戶戴著頭顯時能夠和周圍的環(huán)境發(fā)生自然的交互，是玩出夢想科技進(jìn)軍空間計(jì)算的初心。

想要和周圍的環(huán)境進(jìn)行互動，需要通過傳感器感知到周圍的環(huán)境以后很快地形成地圖。玩出夢想MR共搭載11個攝像頭，7類傳感器，22個紅外補(bǔ)光燈，帶來了更好的設(shè)備感知能力，可以生成由點(diǎn)云、網(wǎng)格和語義標(biāo)簽組成的空間地圖數(shù)據(jù)。

張騰認(rèn)為，空間視頻和地圖模塊都是具有天然LBS屬性的功能，二者結(jié)合可以提供數(shù)字資產(chǎn)保存、讀取和分享的能力，也是玩出夢想科技正在著手的事情。

此外，高質(zhì)量的VST功能也必不可少。玩出夢想科技想要達(dá)成的，是讓VST顯示人眼應(yīng)該看到的內(nèi)容，而不是攝像頭播放的內(nèi)容。

玩出夢想MR使用了3200萬像素的高清3D相機(jī)，并通過優(yōu)化軟件鏈路、利用屏幕特性和卷簾快門相機(jī)特性，實(shí)現(xiàn)了能夠1:1真實(shí)還原物理空間的14ms超低延遲VST功能，十分接近蘋果Vision Pro在M2+R1芯片下達(dá)到的頂尖水準(zhǔn)。

第三個能力是高質(zhì)量的視覺體驗(yàn)，也是玩出夢想科技一直以來自研光學(xué)的出發(fā)點(diǎn)。

視覺體驗(yàn)的基礎(chǔ)是屏幕和光機(jī)，光機(jī)是玩出夢想科技看重的核心技術(shù)領(lǐng)域之一。玩出夢想MR采用了目前業(yè)界最前沿的4K分辨率Micro-OLED屏幕和自研全樹脂4P Pancake光學(xué)方案，雙目像素達(dá)2700萬，PPI達(dá)3882，中心區(qū)域PPD更是高達(dá) 45，希望給到用戶最好的視覺效果。

行業(yè)現(xiàn)存的4K光機(jī)方案在邊緣清晰度、邊緣畸變程度等關(guān)鍵指標(biāo)上無法滿足玩出夢想科技對于空間計(jì)算機(jī)的期許，同時光機(jī)也需要結(jié)合眼動追蹤等技術(shù)才能達(dá)成最佳的效果，因此從長遠(yuǎn)出發(fā)，玩出夢想科技始終堅(jiān)持光學(xué)方案自研，這是玩出夢想科技最重要的技術(shù)壁壘之一。

玩出夢想科技還實(shí)現(xiàn)了空間計(jì)算系統(tǒng)級逐臺顯示標(biāo)定方案，對每一臺玩出夢想MR進(jìn)行色彩精準(zhǔn)度和幾何精準(zhǔn)度的測試，確保雙屏色溫亮度一致和完美合像，實(shí)現(xiàn)了將數(shù)字信息精確的顯示在指定的位置上。

在這三點(diǎn)之外，玩出夢想科技還做了更多的底層技術(shù)研發(fā)，來保證空間計(jì)算機(jī)的體驗(yàn)。

芯片層面，玩出夢想MR在如何發(fā)揮出第二代高通驍龍XR2+全部能力上，做了一系列的系統(tǒng)性工作，首先是前文提到過的結(jié)合眼動追蹤優(yōu)化注視點(diǎn)渲染能力，其次是實(shí)現(xiàn)了與ATW、ASW相近的畫面插幀補(bǔ)幀技術(shù)；最后是實(shí)現(xiàn)計(jì)算資源的合理分配，充分利用芯片中DSP、NPU的異構(gòu)運(yùn)算性能，從而實(shí)現(xiàn)更高的運(yùn)算效率。

同時，玩出夢想科技也在嘗試將更多AI的能力融入到這臺空間計(jì)算機(jī)中。

傳統(tǒng)的AI能力主要應(yīng)用在計(jì)算機(jī)視覺領(lǐng)域，在深度計(jì)算、地圖還有語義標(biāo)簽等空間計(jì)算的底層技術(shù)，以及手勢、眼動、手柄等交互技術(shù)中，已經(jīng)發(fā)揮著重要的作用。

針對近年來火熱的生成式AI，玩出夢想科技也在將其與空間計(jì)算相結(jié)合。例如在空間照片方面，玩出夢想MR就基于生成式AI實(shí)現(xiàn)了2D照片轉(zhuǎn)空間照片的功能，在空間視頻方面，玩出夢想MR會推出立體視頻穩(wěn)像效果，也是運(yùn)用到了生成式AI的能力。

玩出夢想MR還基于更廣義的生成式AI構(gòu)建了AI智能助手，實(shí)現(xiàn)了部分空間計(jì)算的交互功能，不僅可以進(jìn)行語言交流，還能夠進(jìn)行音樂創(chuàng)作和文字繪畫。未來，玩出夢想科技將致力于集成更多AI技術(shù)到產(chǎn)品中，讓用戶體驗(yàn)到與手機(jī)、PC等二維信息載體不同的AI交互體驗(yàn)。

這些技術(shù)底座，為玩出夢想MR幫助用戶提升效率提供了有力的保障，而要實(shí)現(xiàn)「創(chuàng)造快樂」，玩出夢想科技在生態(tài)和技術(shù)兩個方向也都做了精心的布局。

“用戶真正需要什么，如何帶來更優(yōu)秀的用戶價值”，是玩出夢想科技在構(gòu)建內(nèi)容生態(tài)時持續(xù)思考的問題。

站在用戶的角度思考，更多、更高質(zhì)量的可用內(nèi)容，才是吸引消費(fèi)者購買設(shè)備的根本所在。

在此前兩代產(chǎn)品中，玩出夢想科技采用的是精品化的引入戰(zhàn)略，目前商店在架應(yīng)用數(shù)量已經(jīng)超過300個，覆蓋全球近百家CP廠商和優(yōu)勢開發(fā)者，并取得了不錯的成果。

“影音層面，愛奇藝、移動云VR的用戶平均使用時長每周可以達(dá)到數(shù)十小時，這類用戶關(guān)注的更多是3D立體的視覺效果和海量視頻內(nèi)容。這也是當(dāng)前空間計(jì)算時代沉浸式觀影給大家?guī)淼娜乱曈X沖擊力和體驗(yàn)；游戲?qū)用?，《滅亡之后：凜冬》《玩命特攻》《夢境世界》等優(yōu)質(zhì)游戲也各自吸引了一批忠實(shí)的用戶”，朱然介紹到。

而針對玩出夢想MR這款空間計(jì)算機(jī)新品，玩出夢想科技除了堅(jiān)持精品化引入戰(zhàn)略，從技術(shù)層面出發(fā)也做了大量的工作。

玩出夢想MR運(yùn)行的是專為空間計(jì)算打造的Dream OS操作系統(tǒng)，這套操作系統(tǒng)基于安卓AOSP開發(fā)，進(jìn)行了大量針對XR空間計(jì)算的優(yōu)化，從而實(shí)現(xiàn)對原生MR應(yīng)用、2D安卓應(yīng)用以及與其他設(shè)備互聯(lián)和投屏的支持。

在MR原生應(yīng)用方面，玩出夢想科技向開發(fā)者提供了完善的SDK，支持多種引擎，讓開發(fā)者能夠調(diào)用各種空間計(jì)算的能力對設(shè)備進(jìn)行適配；

朱然還重點(diǎn)提到了玩出夢想MR對于空間視頻能力的打造：玩出夢想MR可以兼容主流的3D拍攝素材，在早期空間視頻尚不能普及時，解決內(nèi)容短缺的問題；未來隨著空間視頻普及化、社交化，將具備更強(qiáng)的分享屬性，這時玩出夢想MR的空間視頻能力將成為開發(fā)者的助力，幫助他們在這片藍(lán)海市場里取得成功。

在2D安卓應(yīng)用方面，玩出夢想MR實(shí)現(xiàn)了對傳統(tǒng)安卓應(yīng)用的運(yùn)行和交互適配，并且基于空間計(jì)算的需求，延展了多窗口的操作管理和注視焦點(diǎn)的切換功能，進(jìn)一步豐富空間計(jì)算機(jī)的可用內(nèi)容生態(tài)。

在與其他設(shè)備的互聯(lián)和投屏支持方面，玩出夢想MR致力于改善頭顯的信息孤島問題，讓用戶能夠更長時間使用，并且在需要使用傳統(tǒng)電子設(shè)備時無需摘下頭顯。前面提到的大屏辦公體驗(yàn)，就是依賴于這一點(diǎn)所實(shí)現(xiàn)的。

出海元年，新加坡開啟玩出夢想科技全球化戰(zhàn)略

在6月25日的新品發(fā)布會上，除了發(fā)布玩出夢想MR，玩出夢想科技另一個值得關(guān)注的舉措，是以新加坡為起點(diǎn)將業(yè)務(wù)范圍輻射東南亞，正式開啟全球化戰(zhàn)略。

朱然告訴我們，今年是玩出夢想科技正式出海的元年，之所以將發(fā)布會放在新加坡舉辦，是因?yàn)橥娉鰤粝肟萍歼x定這座城市作為亞太地區(qū)的市場總部。玩出夢想科技第一批進(jìn)入的海外市場是新加坡、馬來西亞，接下來可能會向泰國、印尼、越南和日本市場進(jìn)軍。

探究這一舉措的原因，朱然表示，市場調(diào)研數(shù)據(jù)來看，新加坡月收入平均數(shù)超過3萬元人民幣，消費(fèi)能力較高，因此玩出夢想MR的價格區(qū)間對于新加坡用戶來說相對友好。

玩出夢想科技此次開辟新加坡業(yè)務(wù)，有利于開拓廣袤的海外市場，更好的幫助企業(yè)成長。

巧合的是，蘋果于6月28日第二批正式發(fā)售Vision Pro的國家，也正是新加坡、中國和日本。

面對與Vision Pro的競爭，朱然認(rèn)為，蘋果進(jìn)入中國市場和新加坡市場，其對市場的大規(guī)模教育作用將會令玩出夢想科技這樣的創(chuàng)業(yè)型企業(yè)獲益。玩出夢想科技將著力做好產(chǎn)品和品牌的差異化，來贏得市場細(xì)分領(lǐng)域的用戶群體。

抓住短暫時間窗口，用長期主義對空間計(jì)算全力以赴

根據(jù)研究機(jī)構(gòu)Market.US在2024年3月發(fā)布的一份報(bào)告顯示，全球空間計(jì)算的市場規(guī)模（包含VR、MR、AR、物聯(lián)網(wǎng)、人工智能等）將從2023年的1426億美元，增長到2032年的6202億美元。

但在玩出夢想科技看來，真正留給空間計(jì)算創(chuàng)業(yè)企業(yè)的時間窗口，只有傳統(tǒng)手機(jī)大廠轉(zhuǎn)型前的短暫時間。

“現(xiàn)在傳統(tǒng)手機(jī)大廠，核心業(yè)務(wù)還放在手機(jī)和PC上面，對于他們來說那是目前的利潤高地。但是它們也通過蘋果Vision Pro看到了空間計(jì)算這條賽道，并做了許多研發(fā)儲備。在這些大廠猶豫是不是要小批量試水的時候，正是小型創(chuàng)業(yè)公司的絕好機(jī)會”，朱然對93913表示。

朱然還引用了玩出夢想科技創(chuàng)始人黃鋒在公司內(nèi)部的發(fā)言，“用F的話來說，我們必須要抓住這個歷史機(jī)遇和時間窗口，儲備技術(shù)實(shí)力，不停打磨產(chǎn)品，才有可能在這些大廠轉(zhuǎn)向前站穩(wěn)腳跟?！?/span>

對于玩出夢想科技來說，自創(chuàng)立以來它在空間計(jì)算底層技術(shù)的積累，和對空間計(jì)算產(chǎn)品的不斷打磨，正是其贏得時間窗口的倚仗。

張騰博士以玩出夢想MR的VST功能舉了一個例子：要做好1：1真實(shí)還原超低延遲的VST，可能需要結(jié)構(gòu)、ID設(shè)計(jì)、電路優(yōu)化、軟件鏈路、算法，甚至包括生態(tài)的通力配合，它的復(fù)雜度在消費(fèi)類電子里面可能是史無前例。因此空間計(jì)算機(jī)和手機(jī)表面上看起來有很多共同的點(diǎn)，但在產(chǎn)品實(shí)現(xiàn)上面其實(shí)差距是非常大的，是屬于完全不同的賽道。

“做空間計(jì)算機(jī)和做手機(jī)區(qū)別表面看起來有一些相似相近之處，但本質(zhì)上差別非常大?？臻g計(jì)算機(jī)不僅是消費(fèi)類電子，而且接近一個高精密測繪儀器。其中空間計(jì)算和空間智能的技術(shù)底座實(shí)際上對標(biāo)的是4G/5G通信、電容屏觸控的功能，實(shí)現(xiàn)這些技術(shù)鏈條非常長。我們花了巨量的時間和精力進(jìn)行研發(fā)布局底層技術(shù)，這正是玩出夢想科技的優(yōu)勢?！?/span>

在黃鋒的計(jì)劃中，他人生的最后一場創(chuàng)業(yè)就是在空間計(jì)算這個賽道，堅(jiān)持做好這件事。

“我們和蘋果一樣堅(jiān)定看好這個賽道；我們堅(jiān)持長期主義；我們希望通過我們的努力和對空間計(jì)算的專注，在極短的時間窗口中贏得未來?！?/strong>