Meta:通往下一代計(jì)算平臺(tái)之路的十年

?? 由 文心大模型 生成的文章摘要

我們正站在下一代計(jì)算平臺(tái)的邊緣——一個(gè)最終以人為本而非以產(chǎn)品為中心的平臺(tái)。過(guò)去10年里,我們一直在為這一目標(biāo)而努力,在人工智能和元宇宙方面投入了大量資金,我們的產(chǎn)品,包括Meta Quest 3和Ray-Ban Meta智能眼鏡,已經(jīng)改變了數(shù)百萬(wàn)人體驗(yàn)世界的方式。

我們將你的雙手帶入了VR——無(wú)論是否基于手柄。

我們發(fā)明了由內(nèi)而外的追蹤技術(shù),讓人們可以無(wú)線探索新世界。

我們以低于2000美元的價(jià)格賦予用戶眼動(dòng)追蹤和自然面部表情。

我們讓用戶以大約游戲主機(jī)的價(jià)格無(wú)縫融合虛擬世界和物理世界。

我們與一群開(kāi)發(fā)者、創(chuàng)造者和夢(mèng)想家一起完成了這一切,他們的集體熱情和毅力將現(xiàn)實(shí)變成了虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)。

如今,我們回顧過(guò)去10年Reality Labs在虛擬現(xiàn)實(shí)和人工智能方面的工作,并展望未來(lái)。

“虛擬現(xiàn)實(shí)是科幻小說(shuō)的夢(mèng)想,而互聯(lián)網(wǎng)也曾經(jīng)是一個(gè)夢(mèng)想,電腦和智能手機(jī)也是如此。未來(lái)正在到來(lái),我們有機(jī)會(huì)共同創(chuàng)造。”

自馬克·扎克伯格宣布收購(gòu)Oculus并開(kāi)始推進(jìn)元宇宙愿景以來(lái),已經(jīng)過(guò)去10年了。10年來(lái),Meta對(duì)Reality Labs進(jìn)行了包括了未來(lái)研究、持續(xù)產(chǎn)品開(kāi)發(fā)和制造大量原型在內(nèi)的投資。

如果你持續(xù)關(guān)注Reality Labs,那么對(duì)Meta首席科學(xué)家Michael Abrash應(yīng)該很熟悉,因?yàn)锳brash一直很清楚,MR和AR將成為個(gè)人電腦的繼承者——這與扎克伯格的愿景相同。

Abrash表示:“無(wú)論人們身在何處,都可以面對(duì)面一起,而不會(huì)被物理距離隔開(kāi)。我不再局限于一個(gè)屏幕辦公,而是可以擁有很多屏幕,然后可以從任意多個(gè)角度進(jìn)行分享,我可以通過(guò)單擊切換工作區(qū),而虛擬化身之間則可以互相協(xié)作,就像我們?cè)谕粋€(gè)房間一樣,使用虛擬白板等比現(xiàn)實(shí)世界中同類工具更好的工具。我加入Meta是因?yàn)閄R將改變世界,而扎克伯格也看到了同樣的愿景并給出了大量資源,而這一切將會(huì)最終實(shí)現(xiàn)。”

這一切都始于一個(gè)開(kāi)發(fā)工具包和一個(gè)夢(mèng)想……超過(guò)9000名愛(ài)好者承諾捐出總計(jì)240萬(wàn)美元以幫助實(shí)現(xiàn)這個(gè)夢(mèng)想。從DK1到DK2,Oculus團(tuán)隊(duì)實(shí)現(xiàn)了將人們從客廳傳送到摩天大樓頂部,直視霸王龍的眼睛,而這才是夢(mèng)想的啟始。

Rift于2016年3月拉開(kāi)了現(xiàn)代VR時(shí)代的序幕,隨后我們?cè)诋?dāng)年12月推出了第一代Touch手柄。Touch手柄采用了符合人體工程學(xué)的設(shè)計(jì),支持自然手部姿勢(shì)和互動(dòng),開(kāi)辟了一個(gè)充滿可能性的新世界,比如在游戲「The Climb」中用雙手攀登懸崖面,在「The Mage’s Tale」中用手勢(shì)施展咒語(yǔ)。

直到Rift S于2019年5月發(fā)貨,采用了Quest首次推出的由內(nèi)向外追蹤技術(shù),無(wú)需外部傳感器,使我們看到了VR一體機(jī)所能實(shí)現(xiàn)自由度,因此我們?nèi)ν度肓薞R一體機(jī)的研發(fā)。

Oulus Go是我們首款VR一體機(jī),旨在成為進(jìn)入VR的最簡(jiǎn)單方式,于2018年發(fā)貨,起價(jià)199美元,Go顯著提高了視覺(jué)清晰度,同時(shí)還減少了Oulus Rift出現(xiàn)的紗門效應(yīng)。

作為Oulus Quest的早期前身,Go為人們提供了觀看音樂(lè)會(huì)、電影、體育賽事等前排體驗(yàn)的途徑,同時(shí)還支持與朋友互動(dòng),在Go 3DoF基礎(chǔ)上,我們構(gòu)建了6DoF追蹤并改進(jìn)光學(xué)和顯示之后,體驗(yàn)只會(huì)變得更好。

我們與小米合作,在全球推出了Go以及專門針對(duì)中國(guó)市場(chǎng)的小米VR一體機(jī)。Go還標(biāo)志著我們與高通長(zhǎng)達(dá)數(shù)年的合作關(guān)系的開(kāi)始,以滿足VR一體機(jī)(最終是MR)產(chǎn)品類別的計(jì)算需求,這是我們與業(yè)內(nèi)其他公司合作將該技術(shù)帶給每個(gè)人的持續(xù)戰(zhàn)略的一部分。

除了Rift S,我們還推出了Oulus Quest——全球首款6DoF VR一體機(jī),于2019年發(fā)貨。消費(fèi)者第一次可以自由探索虛擬世界,而無(wú)需借助電纜。得益于人工智能在手部追蹤方面的突破,用戶更能用雙手探索虛擬世界并與之互動(dòng)。2020年10月,我們推出了Quest 2,2021年,各項(xiàng)技術(shù)得到了發(fā)展,例如Passthrough(直通模式)和Air Link,讓人們可以通過(guò)WiFi將PC VR游戲無(wú)線傳輸?shù)絈uest。另外,我們繼續(xù)穩(wěn)步推出Quest軟件更新,以不斷增加Quest頭顯的價(jià)值。

2022年10月,我們推出了Quest Pro,向世界介紹了引人注目的混合現(xiàn)實(shí),其中支持眼動(dòng)追蹤和自然面部表情。僅僅一年后,即2023年10月,Meta Quest 3便誕生了,這是全球首款面向大眾市場(chǎng)的MR頭顯,可以讓世界各地的人們無(wú)縫融合虛擬世界和物理世界。

Quest 3已成為終極家庭娛樂(lè)系統(tǒng),廣泛的健身和健康應(yīng)用使Quest 3成為絕佳體驗(yàn)方式。基于Quest 3,「Super Rumble」玩家能與朋友一起進(jìn)行體驗(yàn)大逃殺。而隨著新的合作伙伴關(guān)系的不斷加入、游戲和體驗(yàn)都只會(huì)變得更好。

Building 8 憑借其對(duì)腦機(jī)接口和免提通信新模式的研究在2017年引起了轟動(dòng),但奠定其傳統(tǒng)的卻是一款視頻通話設(shè)備。

Meta對(duì)智能音箱的回應(yīng)是,Portal通過(guò)屏幕和人工智能驅(qū)動(dòng)的智能攝像頭提供環(huán)境信息、娛樂(lè)等,讓人們?cè)谝曨l通話期間保持在畫面之中。一位獲獎(jiǎng)劇作家使用Portal與3000英里外的演員和導(dǎo)演進(jìn)行協(xié)作;一對(duì)灣區(qū)夫婦通過(guò)Portal訂婚;一個(gè)家庭在疫情期間利用Portal度過(guò)了從東海岸到西海岸的美好時(shí)光。

Portal以一種重要的方式幫助人們克服距離。這一款領(lǐng)先時(shí)代的智能家居設(shè)備,也是首批集成視頻通話屏幕的設(shè)備之一。

想象一下,你可以以更加以人為本、簡(jiǎn)化的方式使用計(jì)算機(jī)或智能手機(jī)的所有應(yīng)用和功能,你將能以前所未有的方式完成打算做的所有事情。情境感知人工智能幫助你探索和了解周圍的世界,可以一目了然訪問(wèn)豐富的3D虛擬信息。不僅如此還可以更好與朋友和家人聯(lián)系——無(wú)論身在世界何處。

而以上這一切你可以通過(guò)一副輕巧、時(shí)尚的眼鏡來(lái)完成——這是一款首創(chuàng)、方便、易于使用的設(shè)備,不會(huì)強(qiáng)迫你在物理世界和數(shù)字世界之間做出選擇,而是以一種無(wú)縫、直觀的方式將兩者融合。智能眼鏡可以讓你抬頭并關(guān)注周圍世界,而不是如同手機(jī)一樣,注意力僅在手掌邊緣。

這是我們對(duì)AR眼鏡的長(zhǎng)期愿景,我們正在朝著這個(gè)目標(biāo)努力。當(dāng)今的智能眼鏡是一個(gè)重要的基石——采用時(shí)尚、全天可佩戴的外形,并裝載了智能技術(shù)、傳感器等。這就是為什么我們與EssilorLuxottica合作的原因,從人們喜愛(ài)的標(biāo)志性時(shí)尚開(kāi)始,然后重新構(gòu)想智能眼鏡的未來(lái)。

2021年9月,我們推出了第一代智能眼鏡Ray-Ban Stories。是聽(tīng)音樂(lè)、收聽(tīng)播客和在旅途中接聽(tīng)電話的理想選擇。但更重要的是,Ray-Ban Stories為人們提供了一種新的方式來(lái)捕獲瞬間,同時(shí)充分融入其中,這要?dú)w功于免提拍攝高質(zhì)量照片和視頻功能。

2023年10月,雷朋Meta智能眼鏡系列亮相,該系列在第一代產(chǎn)品的基礎(chǔ)上進(jìn)行了改進(jìn)。我們將Meta AI集成到了雷朋Meta智能眼鏡上(目前僅限于美國(guó)市場(chǎng)),并對(duì)其進(jìn)行了優(yōu)化,以實(shí)現(xiàn)免提移動(dòng)體驗(yàn)。通過(guò)說(shuō)“嘿 Meta”,人們只需使用聲音就可以激發(fā)創(chuàng)造力、獲取信息并控制眼鏡。得益于人工智能,雷朋Meta智能眼鏡將能隨著時(shí)間的推移變得越來(lái)越好、越來(lái)越智能。新的人工智能體驗(yàn)即將推出,包括多模式人工智能,因此眼鏡可以理解用戶所看到的內(nèi)容,從而提供有價(jià)值的答案。

我們將焦點(diǎn)轉(zhuǎn)向Reality Labs Research(RL-R),與Meta基礎(chǔ)人工智能研究團(tuán)隊(duì)(FAIR)非常相似,RL-R的成立是基于對(duì)長(zhǎng)期投資的重要性的理解。RL-R擁有豐富的長(zhǎng)尾研究成果,致力于推動(dòng)從顯示系統(tǒng)到觸覺(jué)等領(lǐng)域的最先進(jìn)技術(shù)的發(fā)展。我們定期發(fā)布研究成果與更廣泛的研究分享,以便有機(jī)會(huì)擴(kuò)展。

RL-R還是許多成功技術(shù)轉(zhuǎn)讓的發(fā)源地,包括Quest手部追蹤和我們智能眼鏡產(chǎn)品中的音頻增強(qiáng)功能。正是RL-R與我們的產(chǎn)品團(tuán)隊(duì)合作,使Quest Pro以及后來(lái)的Quest 3中配備的Pancake lenses鏡頭和偏振光學(xué)器件成為現(xiàn)實(shí)。

RL-R(以及整個(gè)公司的產(chǎn)品團(tuán)隊(duì))并沒(méi)有滿足于現(xiàn)狀,而是繼續(xù)探索新的研究方向,這些研究方向很可能在未來(lái)幾年成為行業(yè)標(biāo)準(zhǔn),包括EMG、超現(xiàn)實(shí)編解碼器化身和情境化人工智能——所有這些都是令人興奮的新技術(shù),我們相信,隨著計(jì)算領(lǐng)域的下一個(gè)重大范式轉(zhuǎn)變的發(fā)生,這些技術(shù)將幫助人們與設(shè)備以及彼此之間無(wú)縫交互。

人工智能在我們的長(zhǎng)期元宇宙愿景以及我們?yōu)閷?shí)現(xiàn)這一目標(biāo)所做的工作(從計(jì)算機(jī)視覺(jué)到機(jī)器學(xué)習(xí)等)中始終發(fā)揮著關(guān)鍵作用。而在大型語(yǔ)言模型(LLM)領(lǐng)域的突破正在加速這一進(jìn)步。

Quest 3提供引人入勝的MR體驗(yàn),從完全沉浸式到讓你與物理世界和數(shù)字內(nèi)容互動(dòng)體驗(yàn),雷朋Meta智能眼鏡使用戶體驗(yàn)Meta AI實(shí)用性和娛樂(lè)性,而AR眼鏡將提供當(dāng)這兩種技術(shù)路徑交匯時(shí),兩全其美的體驗(yàn)。就像智能手機(jī)并沒(méi)有取代筆記本電腦或臺(tái)式電腦一樣,AR眼鏡也不會(huì)成為MR頭顯的終結(jié)。相反,我們看到的是構(gòu)成未來(lái)結(jié)構(gòu)的一系列設(shè)備,得益于過(guò)去18個(gè)月人工智能模型的快速突破,我們現(xiàn)在認(rèn)為,在通往全增強(qiáng)現(xiàn)實(shí)眼鏡的道路上,我們擁有的智能眼鏡將比我們之前想象的更有吸引力——即使沒(méi)有顯示器。

我們正在構(gòu)建一種新型計(jì)算平臺(tái),該平臺(tái)將幫助用戶以比當(dāng)今2D屏幕更加自然和直觀的方式更好與人和事物聯(lián)系。這意味著你可以與朋友和家人同步工作、學(xué)習(xí)、娛樂(lè)、購(gòu)物和創(chuàng)作,以及實(shí)現(xiàn)當(dāng)今使用計(jì)算機(jī)和智能手機(jī)無(wú)法輕易適用的全新體驗(yàn)。

技術(shù)——尤其是連接人們的技術(shù)——應(yīng)該為盡可能多的人提供。這是我們工作的基礎(chǔ),也是我們DNA的核心。創(chuàng)新就是要實(shí)現(xiàn)新的突破——要真正做到這一點(diǎn),需要將突破帶給大眾。

“我們正在做的事情實(shí)際上只能在世界上的少數(shù)幾個(gè)地方發(fā)生,”Abrash指出,“扎克伯格在Reality Labs中投入了大量的資源,創(chuàng)造了一個(gè)50年一遇的機(jī)會(huì)來(lái)改變?nèi)藗児ぷ鳌蕵?lè)和聯(lián)系的方式,這將是個(gè)人計(jì)算的未來(lái)。計(jì)算領(lǐng)域的下一次革命將會(huì)發(fā)生,但它如何發(fā)生實(shí)際上取決于誰(shuí)來(lái)做,如果你想?yún)⑴c其中,那么你所在之地就是起點(diǎn)?!?/p>

在過(guò)去的10年里,我很榮幸能與XR構(gòu)建者社區(qū)一起工作,使下一個(gè)計(jì)算平臺(tái)成為現(xiàn)實(shí)。我們致力于繼續(xù)開(kāi)放并與志同道合的合作伙伴一起建設(shè),我們迫不及待想看看未來(lái)10年會(huì)發(fā)生什么。

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明出處」