The Verge獲悉，OpenAI計(jì)劃于12月推出下一個(gè)前沿模型Orion。

與OpenAI最后兩個(gè)模型GPT-4o和GPT-o1不同，Orion最初不會(huì)通過ChatGPT廣泛發(fā)布。據(jù)一位熟悉該計(jì)劃的消息人士稱，OpenAI計(jì)劃首先向與其密切合作的公司授予訪問權(quán)限，以便相關(guān)公司構(gòu)建旗下產(chǎn)品和功能。

另一位消息人士告訴The Verge，微軟內(nèi)部的工程師正準(zhǔn)備最早于11月在Azure上托管Orion。雖然OpenAI內(nèi)部將Orion視為GPT-4的繼任者，但目前尚不清楚該公司是否會(huì)在外部將其稱為GPT-5。與往常一樣，發(fā)布計(jì)劃可能會(huì)發(fā)生變化，并可能推遲。OpenAI和微軟拒絕就此事發(fā)表評(píng)論。

OpenAI一位高管曾表示，Orion的功能可能比GPT-4強(qiáng)大100倍；其與OpenAI在9月發(fā)布的o1推理模型不同。該公司的目標(biāo)是隨著時(shí)間的推移將其LLM整合，以創(chuàng)建一個(gè)功能更強(qiáng)大的模型，最終可以稱為通用人工智能（AGI）。

此前有報(bào)道稱，OpenAI正在使用代號(hào)為Strawberry的o1提供合成數(shù)據(jù)來訓(xùn)練Orion。一位知情人士向The Verge透露，9月，OpenAI研究人員舉行了一場(chǎng)活動(dòng)來慶祝完成新模型的訓(xùn)練。

這個(gè)時(shí)間與OpenAI首席執(zhí)行官Sam Altman在X平臺(tái)發(fā)表的一篇神秘帖子相吻合，他在帖子中表示，“很高興看到一顆冬季星座即將升起”。如果你問ChatGPT o1 Altman的帖子隱藏了什么，它會(huì)告訴你，他暗示了Orion這個(gè)詞，這是11月到2月夜空中最明顯的冬季星座。

OpenAI下一代模型的發(fā)布正值OpenAI的關(guān)鍵時(shí)刻，該公司剛剛完成了歷史性的66億美元融資，這需要OpenAI重組為一家營(yíng)利性實(shí)體。

將混合現(xiàn)實(shí)游戲從Meta Quest移植到AR眼鏡并不像看起來那么容易。

開發(fā)者可能會(huì)認(rèn)為從應(yīng)用程序的角度來看，Quest和Orion原型等眼鏡之間沒有太大區(qū)別，只是硬件和操作系統(tǒng)處理將虛擬內(nèi)容添加到現(xiàn)實(shí)世界的方式不同。

但Meta首席技術(shù)官Andrew Bosworth解釋了為什么情況并非如此。當(dāng)被問及將游戲從Quest 移植到Orion是否容易時(shí)，他回答道：

“不，我認(rèn)為這并不容易。雖然不是不可能，但并不容易。我知道兩者看起來非常相似，但在實(shí)踐中，控制方案卻大不相同。Quest方面，你顯然會(huì)采用Quest手部追蹤，但在Orion，手部追蹤體積要小得多。而且我還認(rèn)為可能存在更實(shí)質(zhì)性的差異，而且計(jì)算范圍要小10倍，并無法訪問虛擬化場(chǎng)景圖構(gòu)造，那里有更多差異。不過，我認(rèn)為有些游戲可以移植運(yùn)行。例如，我認(rèn)為在Orion上玩Cubism會(huì)很有趣。但我認(rèn)為開發(fā)者需要付出一些努力和思考。”

Orion的算力比Quest 3低10倍，Orion使用無線計(jì)算盤進(jìn)行渲染，一些業(yè)內(nèi)人士猜測(cè)，Orion“冰球”可能具有與Quest頭顯類似的算力。但是，頭顯能夠?qū)峥諝鈴耐L(fēng)口排出，而Orion“冰球”設(shè)計(jì)為放在口袋中或埋在包里，在這種情況下，熱力條件可能更加苛刻。為了避免“冰球”在腿上感覺很熱，Meta可能已經(jīng)將Orion時(shí)鐘速度調(diào)整為比理論上可能的性能低得多的性能。

這再次表明AR眼鏡無法也不會(huì)取代頭顯，除了提供更寬的視野和完全不透明性之外，從外形上看，頭顯還提供更高的性能，就像手機(jī)和筆記本電腦之間的區(qū)別。

01 Meta Quest 3S

首先亮相的是Quest 3S，扎克伯格只是簡(jiǎn)單的介紹了Quest 3S與Quest 3擁有幾乎完全相同的硬件規(guī)格，將Pancake透鏡換回了菲涅爾透鏡，然后就將重點(diǎn)放在了價(jià)格上：128GB版本的Quest 3S售價(jià)僅有299.99美元，相比Quest 3發(fā)售時(shí)便宜了200美元。

軟件方面，Meta也為Quest 3S做出了許多改進(jìn)，一是加入了對(duì)Dolby ATOMS的支持，在空間音頻方面Quest 3S將帶來更好的體驗(yàn)；

二是新增加了名為Hyper Scape的新功能，能夠以照片集的建模掃描和分享用戶周圍的環(huán)境；

三是和微軟合作為所有安裝了Windows 11操作系統(tǒng)的電腦帶來了更便利的屏幕串流功能，只需要佩戴Quest 3S看向鍵盤就能快速的完成連接。

四是在Horizon OS上實(shí)現(xiàn)了在VST模式下隨意在周圍環(huán)境中放置應(yīng)用的窗口。

生態(tài)方面，扎克伯格公布了《蝙蝠俠：阿卡姆之影》、《Just Dance》、《Supernatural》多人模式、《Horizon Worlds》等新作和更新。

Meta Quest 3S預(yù)定已經(jīng)開啟，并將于10月15日開始發(fā)貨。

02 AR眼鏡原型Orion

扎克伯格在演講的最后部分，公布了這一屆Meta Connect真正重量級(jí)的全新產(chǎn)品——AR眼鏡原型Orion。扎克伯格稱其為“世界上最先進(jìn)的眼鏡，是對(duì)未來的一瞥”。

我們結(jié)合扎克伯格現(xiàn)場(chǎng)公布的信息，以及TheVerge等已經(jīng)體驗(yàn)過Orion的媒體評(píng)測(cè)，總結(jié)了這款產(chǎn)品值得關(guān)注的地方。

首先是Orion的產(chǎn)品形態(tài)。

盡管看起來像是一體式的AR眼鏡，但Orion的確是一臺(tái)分體機(jī)。Orion的整個(gè)套裝包括一臺(tái)眼鏡、一個(gè)計(jì)算單元以及一條肌電腕帶，眼鏡和計(jì)算單元之間采用無線連接，眼鏡擁有定制的內(nèi)置芯片，負(fù)責(zé)處理位置追蹤、手勢(shì)追蹤、眼球追蹤以及“定制的AR世界鎖定圖形算法”，而計(jì)算單元?jiǎng)t負(fù)責(zé)處理App邏輯，包括渲染和一些通用的計(jì)算。這也幫助Orion將AR眼鏡部分的重量降到了100克以內(nèi)，以保證佩戴的舒適度。

扎克伯格并未透露這款定制芯片是與哪家芯片廠商合作設(shè)計(jì)，但有意思的是，英偉達(dá)NVIDIA的創(chuàng)始人黃仁勛在扎克伯格介紹Orion的過程中數(shù)次出鏡，占據(jù)了不小的篇幅。在展示Orion體驗(yàn)的視頻中，黃仁勛還評(píng)價(jià)了Orion的使用體驗(yàn)，稱其“顯示很棒，追蹤很棒，色彩也很不錯(cuò)”，此外針對(duì)Orion的演示中最引人注意的也是一項(xiàng)AI功能，可以通過攝像頭識(shí)別用戶周圍的物體。

值得一提的是，由于演示的場(chǎng)景中明確的包含了雙人共同玩空間游戲的場(chǎng)景，因此Orion顯然是一款市面上十分少見的6DoF AR眼鏡，而非僅僅具備3DoF功能的AR眼鏡。此外還要注意的是，Orion具備多任務(wù)處理的能力，能夠同時(shí)顯示多個(gè)App窗口，十分符合扎克伯格對(duì)于下一代計(jì)算平臺(tái)的定義。

接下來是光學(xué)部分，Orion給出了一個(gè)天花板級(jí)的方案。

Orion采用的是三色Micro-LED合色 +光波導(dǎo)的全彩顯示方案，但是與市面上常見的光波導(dǎo)方案不同的是，其FOV達(dá)到了驚人的70°，已經(jīng)十分接近VR頭顯的FOV大小。

TheVerge的記者在體驗(yàn)中也提到，他需要非?？拷坨R中所顯示的虛擬物體，才能夠感知到FOV的邊界。而以往追求輕便的光波導(dǎo)AR眼鏡大多只能提供25-30°的FOV，這樣的提升對(duì)于AR眼鏡來說是顛覆性的，不僅在很大程度上消除了虛擬內(nèi)容因?yàn)镕OV過小無法在視野中完整顯示的問題，也能為應(yīng)用的開發(fā)帶來更大的靈活性。

此外，從TheVerge記者的體驗(yàn)來看，整個(gè)光學(xué)模組在顯示的亮度上也做得十分出色，在室內(nèi)燈光照明的環(huán)境中能夠清楚的辨別眼鏡顯示的內(nèi)容。

而要達(dá)成這樣的現(xiàn)實(shí)效果，一方面是由于Orion使用了最先進(jìn)的Micro-LED光機(jī)（據(jù)小道消息Orion使用的三色Micro-LED來自中國(guó)的Micro-LED廠商JBD）。Micro-LED具備體積小、發(fā)光效率高、最高亮度高等多種優(yōu)點(diǎn)，被廣泛認(rèn)為是最具前景的AR顯示技術(shù)。

而另一方面則是Meta在光波導(dǎo)片層面也下足了功夫。如果你仔細(xì)觀看Orion的演示視頻，不難發(fā)現(xiàn)Orion鏡片的波導(dǎo)區(qū)域幾乎覆蓋了整個(gè)鏡片，而不是其他光波導(dǎo)片上常見的僅覆蓋眼球前方的一小片區(qū)域。此外，從眼鏡外側(cè)看到的漏光以及色散的現(xiàn)象也與常見的衍射光波導(dǎo)片有較大的差異。

據(jù)悉，Orion的光波導(dǎo)片采用了碳化硅而非常見的玻璃和樹脂材質(zhì)，其折射率相比后兩者要更大，帶來了更好的光學(xué)性能，只是目前材料的量產(chǎn)和加工成本處在一個(gè)相當(dāng)高的水準(zhǔn)無法應(yīng)用到消費(fèi)級(jí)的產(chǎn)品中。

最后則是Orion的交互，Meta為其設(shè)計(jì)了語(yǔ)音、眼球追蹤、手勢(shì)追蹤以及肌電腕帶四種交互模式。其中肌電腕帶在前幾年就已經(jīng)在Meta申請(qǐng)的專利中，這次被真正的集成到了產(chǎn)品中，讓用戶即使手插在口袋中或者是自然垂下也能夠完成與Orion的交互，無需像使用手勢(shì)識(shí)別那樣將手舉到AR眼鏡攝像頭的視野范圍中，更方便也更隱蔽。

扎克伯格對(duì)TheVerge表示，不同的交互方式對(duì)應(yīng)著不同的使用場(chǎng)景，對(duì)于部分應(yīng)用來說，使用手勢(shì)進(jìn)行控制而不是伸手去交互要更方便一些。目前肌電腕帶還需要用戶實(shí)際做出相應(yīng)的手勢(shì)才能識(shí)別，未來Meta將繼續(xù)對(duì)其進(jìn)行改進(jìn)，只需要用戶嘗試做出某個(gè)手勢(shì)即可識(shí)別響應(yīng)。

Orion還和Ray-Ban Meta智能眼鏡一樣具備識(shí)別周圍環(huán)境并作為上下文進(jìn)行理解的能力以及與其他人進(jìn)行視頻通話的能力。

例如當(dāng)你周圍擺放著不同的食材，你可以直接問AI可以用這些材料做出哪些食物，AI就會(huì)自動(dòng)進(jìn)行識(shí)別并進(jìn)行操作步驟的指引。而在進(jìn)行視頻通話時(shí)，其他用戶可以看到Orion攝像頭能夠拍攝到的畫面。

不過扎克伯格也直言，Orion并非是一款能夠向消費(fèi)市場(chǎng)推出的產(chǎn)品，它還需要進(jìn)一步縮小機(jī)內(nèi)元器件占用的體積來讓眼鏡變得更加“苗條”，降低眼鏡各個(gè)部件的制造成本，同時(shí)不斷迭代改進(jìn)顯示效果。在幾年之后，Meta將在Orion的基礎(chǔ)上向市場(chǎng)推出改進(jìn)后真正意義上的消費(fèi)級(jí)AR眼鏡。

扎克伯格還演講中提及，目前版本的Orion將被作為DevKit提供給一些開發(fā)者。Meta將向員工和選定的外部用戶提供Orion的訪問權(quán)限，以便其團(tuán)隊(duì)可以學(xué)習(xí)、迭代和構(gòu)建消費(fèi)者AR眼鏡產(chǎn)品線，計(jì)劃不久后開始出貨。TheVerge的爆料稱，Meta小批量生產(chǎn)了大約1000臺(tái)的Orion。

如果說蘋果Vision Pro給所有的MR頭顯設(shè)立了一個(gè)體驗(yàn)的標(biāo)桿，那么Orion完全能夠稱得上是給所有的AR眼鏡廠商也設(shè)定了一個(gè)短期內(nèi)的目標(biāo)——全彩顯示，70° FOV，100克以內(nèi)的重量，接近正常眼鏡的外觀，消費(fèi)者負(fù)擔(dān)得起的價(jià)格。而除了Meta是否還有其他致力于AR眼鏡的廠商會(huì)向這一標(biāo)準(zhǔn)發(fā)起沖擊，我們非常期待。

03 Ray-Ban Meta智能眼鏡

在本屆Meta Connect上，銷量超過100萬臺(tái)的Ray-Ban Meta智能眼鏡，也迎來了一波AI功能的更新。在Meta的開源大模型Llama更新到 3.2版本后，其具備的多模態(tài)AI能力讓Ray-Ban Meta智能眼鏡可以幫助用戶做更多的事情。

例如你在停車場(chǎng)停車時(shí)，可以直接呼叫Ray-Ban Meta讓它幫助你記錄下停車的位置，也可以讓AI根據(jù)眼前的食材生成一道美味的食譜幫助你只做一道美味的菜肴，甚至還能幫你挑選參加聚會(huì)時(shí)的服飾穿搭。

此外，Ray-Ban Meta智能眼鏡還加入了實(shí)時(shí)翻譯的功能，幫助用戶更好的與使用另一種語(yǔ)言的人們進(jìn)行溝通交流。

用扎克伯格的話來說，Ray-Ban Meta眼鏡可以讓AI助手“見你所見，聞你說聞”，是AI最完美的日常形態(tài)。

而在款式方面，Ray-Ban Meta將推出帶有變色鏡片的款式，以及一款透明框架款式，將攝像頭、電路、芯片、電池等完整內(nèi)構(gòu)呈現(xiàn)在消費(fèi)者眼中，非常具備極客風(fēng)范。

Meta今日的股票價(jià)格在扎克伯格演講結(jié)束后不久達(dá)到最高的576.88美元。截止撰稿時(shí)，Meta今日的股價(jià)收盤于568.31美元，相比最高點(diǎn)有所回落，但相比今日開盤價(jià)格依然小幅上漲0.88%，從股價(jià)來看市場(chǎng)對(duì)Meta新品后續(xù)的表現(xiàn)仍保有樂觀的態(tài)度。

為了在XR領(lǐng)域占據(jù)更大的市場(chǎng)份額，Meta可能準(zhǔn)備在今年晚些時(shí)候舉行的Connect開發(fā)者大會(huì)上展示原型AR硬件。

Business Insider的一份報(bào)道稱，Meta AR團(tuán)隊(duì)已準(zhǔn)備好在Connect 2024上公布“Orion”AR眼鏡原型，該報(bào)道援引了兩名知情人士的話。

“Orion”AR眼鏡過去九年一直在開發(fā)中，Meta通常會(huì)在Connect 大會(huì)推出新產(chǎn)品，例如Quest 3，而且還經(jīng)由大會(huì)發(fā)布研究項(xiàng)目和產(chǎn)品原型，例如Project Aria，該項(xiàng)目于2020年推出時(shí)展示了該公司用于訓(xùn)練其AR感知系統(tǒng)的一系列傳感器。

目前還不確定“Orion”AR眼鏡和Project Nazare是否為同一款產(chǎn)品，Meta早在2021年就曾稱這將是該公司的“第一款真正的增強(qiáng)現(xiàn)實(shí)眼鏡”。彼時(shí)，Meta首席執(zhí)行官兼創(chuàng)始人扎克伯格概述了實(shí)現(xiàn)這一目標(biāo)的難度：

“為了獲得正確的外形尺寸和體驗(yàn)，需要做大量的技術(shù)工作。我們必須將全息顯示器、投影儀、電池、收音機(jī)、定制硅芯片、相機(jī)、揚(yáng)聲器、傳感器等安裝到厚度約為5毫米的眼鏡中，以繪制周圍的世界。因此，我們與Nazare的合作還有很長(zhǎng)的路要走，但我們正在取得良好的進(jìn)展。”

去年年底，Meta首席技術(shù)官博斯沃思在接受The Verge采訪時(shí)表示，Meta AR眼鏡是建立在“成本極其昂貴的技術(shù)道路上”的。

值得注意的是，“Orion”AR眼鏡將是“真正意義”的AR眼鏡，而不是像Google Glass那樣基于HUD的智能眼鏡，也不是像Quest系列這樣的混合現(xiàn)實(shí)頭顯。此外，Business Insider報(bào)道稱，消費(fèi)者版AR眼鏡預(yù)計(jì)在幾年內(nèi)準(zhǔn)備就緒，之前的報(bào)道稱最快可能會(huì)在2027年推出。

　　Schell Games是一家獨(dú)立的游戲工作室，致力于虛擬現(xiàn)實(shí)游戲開發(fā)。今年早些時(shí)候，該工作室發(fā)布了《I Expect You to Die》(《我希望你死》)的游戲demo，玩家需要使一輛布滿玄機(jī)的車發(fā)動(dòng)并沖出囹圄。該游戲的完整版本將會(huì)于明年Oculus Rift頭顯消費(fèi)者版本開售時(shí)同步上線，并支持Oculus Touch控制器。然而這個(gè)月，Schell Games宣布其另一款游戲《Orion Trail》(《獵戶座之路》)即將被制作成為VR版本。

　　《Orion Trail》是Schell Games對(duì)經(jīng)典科幻系列《Star Trek》(《星際迷航》)和冒險(xiǎn)游戲《Oregon Trail》(《俄勒岡之旅》)的致敬之作?！禣rion Trail》PC版本于去年3月通過眾籌網(wǎng)站Kickstarter籌得97801美金，并于去年10月登陸了Steam平臺(tái)。游戲中，玩家將扮演船長(zhǎng)角色，負(fù)責(zé)決定船的航向，以及探索的方位等等。

　　《Orion Trail》的VR版本將會(huì)于2015年12月24日登陸Gear VR，售價(jià)4.99美金。該游戲的老玩家相信已經(jīng)非常熟悉其獨(dú)特的2D藝術(shù)風(fēng)格，應(yīng)該也會(huì)覺得看起來并不太適合VR版本。Schell Games顯然已經(jīng)意識(shí)到了這點(diǎn)，強(qiáng)調(diào)《Orion Trail》的VR版本不僅會(huì)有一個(gè)適配界面也會(huì)對(duì)角色進(jìn)行一些調(diào)整。目前還不清楚該游戲的VR版本是否會(huì)支持Oculus Rift和HTC Vive之類的PC頭顯。