Meta宣布，XR Core SDK 76.0 版本迎來(lái)關(guān)鍵升級(jí)，備受矚目的 Passthrough Camera API（CPA）成功從 “公共實(shí)驗(yàn)” 階段邁入 “公開(kāi)” 行列。這一轉(zhuǎn)變意義深遠(yuǎn)，意味著開(kāi)發(fā)者擁有了全新的創(chuàng)作空間——他們既可以對(duì)Horizon商店中現(xiàn)有的應(yīng)用進(jìn)行升級(jí)，將CPA功能融入其中，也能夠開(kāi)發(fā)全新應(yīng)用并借助Horizon商店發(fā)布。不過(guò)，Meta也明確表示，相關(guān)應(yīng)用的上線需要經(jīng)過(guò)嚴(yán)格的 “審核流程”，以此確保應(yīng)用質(zhì)量與用戶體驗(yàn)。?

隨著CPA正式公開(kāi)，我們有理由期待現(xiàn)有應(yīng)用的更新浪潮即將襲來(lái)。屆時(shí)，CPA所帶來(lái)的創(chuàng)新功能將被逐一解鎖。此前，使用CPA的應(yīng)用由于尚處實(shí)驗(yàn)階段，僅能通過(guò)側(cè)載方式安裝在 Meta Quest 設(shè)備上，而普通用戶難以觸及這些功能。如今，隨著API的正式發(fā)布，其優(yōu)勢(shì)將逐步輻射到廣大普通用戶群體，為他們帶來(lái)更豐富、更沉浸的XR體驗(yàn)。?

在展示CPA強(qiáng)大能力的先鋒隊(duì)伍中，Twenty Guys、Lab Rats和Digitalizer等實(shí)驗(yàn)性MR應(yīng)用表現(xiàn)亮眼，率先呈現(xiàn)了API解鎖后的全新功能，為XR應(yīng)用開(kāi)發(fā)樹(shù)立了新的標(biāo)桿。?

從技術(shù)本質(zhì)來(lái)看，混合現(xiàn)實(shí)的發(fā)展高度依賴頭戴式耳機(jī)對(duì)環(huán)境的感知與理解能力。它不僅需要從空間維度把握環(huán)境布局，還需從語(yǔ)義層面理解環(huán)境中的各類物體與場(chǎng)景。然而，當(dāng)前 Meta Quest設(shè)備對(duì)周?chē)h(huán)境的認(rèn)知能力存在一定局限。頭顯雖能進(jìn)行環(huán)境的3D掃描，但結(jié)果較為粗略；對(duì)于家具、窗戶、門(mén)等物體，也僅能實(shí)現(xiàn)基礎(chǔ)識(shí)別。這些抽象化的環(huán)境信息，在一定程度上限制了開(kāi)發(fā)者在混合現(xiàn)實(shí)應(yīng)用開(kāi)發(fā)中的創(chuàng)意發(fā)揮。?

而Passthrough Camera API的出現(xiàn)，打破了這一僵局。借助該API，應(yīng)用得以獲取Passthrough Camera的視頻源，并運(yùn)用專有計(jì)算機(jī)視覺(jué)算法與AI模型，對(duì)用戶所處環(huán)境展開(kāi)深度分析。這一技術(shù)革新，為混合現(xiàn)實(shí)領(lǐng)域注入了新的活力，開(kāi)辟出無(wú)限可能。?

回顧Passthrough Camera API的發(fā)展歷程，它于Meta Connect 2024首次亮相，并在今年3月中旬以實(shí)驗(yàn)狀態(tài)推出。彼時(shí)，受限于其狀態(tài)，該API無(wú)法在Horizon Store應(yīng)用中使用。如今，隨著版本升級(jí)，這一限制被徹底解除，標(biāo)志著CPA邁向成熟，也預(yù)示著混合現(xiàn)實(shí)應(yīng)用生態(tài)即將迎來(lái)新一輪變革。

Meta旨在實(shí)現(xiàn)Meta Quest房間掃描自動(dòng)化，以消除使用混合現(xiàn)實(shí)中最大的摩擦點(diǎn)之一。

Meta發(fā)布了新版本Meta XR Core SDK，發(fā)行說(shuō)明中包含了一條針對(duì)開(kāi)發(fā)者的通知。

“我們計(jì)劃在2025年取消用戶編輯空間設(shè)置功能，相關(guān)開(kāi)發(fā)者需要減少對(duì)該功能的依賴，此功能與我們的愿景不相容?！?/p>

VR達(dá)人Luna最先發(fā)現(xiàn)了這個(gè)通知。基于Meta Quest 3和3S，可以使用集成的深度傳感器掃描房間。生成的3D房間網(wǎng)格可用于混合現(xiàn)實(shí)應(yīng)用，開(kāi)發(fā)者可通過(guò)“設(shè)置”>“環(huán)境設(shè)置”>“空間設(shè)置”手動(dòng)初始化房間掃描。

值得一提的是，如果家具被移動(dòng)或者房間里的其他東西發(fā)生變化，則必須手動(dòng)編輯掃描結(jié)果，或者必須從頭開(kāi)始重新掃描房間。這兩種選擇對(duì)于普通用戶來(lái)說(shuō)都很不方便。

Horizon OS更新V71于2024年底發(fā)布，本應(yīng)引入一項(xiàng)功能，讓用戶無(wú)需從頭開(kāi)始掃描房間即可恢復(fù)房間掃描，并自動(dòng)更新房間布局和家具。然而，這項(xiàng)功能似乎尚未推出。在最新Meta XR Core SDK發(fā)布說(shuō)明中，Meta提到了這項(xiàng)功能（“恢復(fù)掃描”），這表明仍在計(jì)劃中。

Meta XR Core SDK發(fā)布說(shuō)明還表明，計(jì)劃在2025年對(duì)Quest 3和3S空間掃描進(jìn)行重大更改，并且該過(guò)程將以某種方式實(shí)現(xiàn)自動(dòng)化，因此無(wú)需進(jìn)行任何編輯。如果設(shè)備能夠不時(shí)在后臺(tái)掃描房間并自動(dòng)調(diào)整3D房間網(wǎng)格和家具而無(wú)需用戶手動(dòng)干預(yù)，那就太理想了。