Meta宣布，XR Core SDK 76.0 版本迎來關(guān)鍵升級(jí)，備受矚目的 Passthrough Camera API（CPA）成功從 “公共實(shí)驗(yàn)” 階段邁入 “公開” 行列。這一轉(zhuǎn)變意義深遠(yuǎn)，意味著開發(fā)者擁有了全新的創(chuàng)作空間——他們既可以對(duì)Horizon商店中現(xiàn)有的應(yīng)用進(jìn)行升級(jí)，將CPA功能融入其中，也能夠開發(fā)全新應(yīng)用并借助Horizon商店發(fā)布。不過，Meta也明確表示，相關(guān)應(yīng)用的上線需要經(jīng)過嚴(yán)格的 “審核流程”，以此確保應(yīng)用質(zhì)量與用戶體驗(yàn)。?

隨著CPA正式公開，我們有理由期待現(xiàn)有應(yīng)用的更新浪潮即將襲來。屆時(shí)，CPA所帶來的創(chuàng)新功能將被逐一解鎖。此前，使用CPA的應(yīng)用由于尚處實(shí)驗(yàn)階段，僅能通過側(cè)載方式安裝在 Meta Quest 設(shè)備上，而普通用戶難以觸及這些功能。如今，隨著API的正式發(fā)布，其優(yōu)勢(shì)將逐步輻射到廣大普通用戶群體，為他們帶來更豐富、更沉浸的XR體驗(yàn)。?

在展示CPA強(qiáng)大能力的先鋒隊(duì)伍中，Twenty Guys、Lab Rats和Digitalizer等實(shí)驗(yàn)性MR應(yīng)用表現(xiàn)亮眼，率先呈現(xiàn)了API解鎖后的全新功能，為XR應(yīng)用開發(fā)樹立了新的標(biāo)桿。?

從技術(shù)本質(zhì)來看，混合現(xiàn)實(shí)的發(fā)展高度依賴頭戴式耳機(jī)對(duì)環(huán)境的感知與理解能力。它不僅需要從空間維度把握環(huán)境布局，還需從語義層面理解環(huán)境中的各類物體與場(chǎng)景。然而，當(dāng)前 Meta Quest設(shè)備對(duì)周圍環(huán)境的認(rèn)知能力存在一定局限。頭顯雖能進(jìn)行環(huán)境的3D掃描，但結(jié)果較為粗略；對(duì)于家具、窗戶、門等物體，也僅能實(shí)現(xiàn)基礎(chǔ)識(shí)別。這些抽象化的環(huán)境信息，在一定程度上限制了開發(fā)者在混合現(xiàn)實(shí)應(yīng)用開發(fā)中的創(chuàng)意發(fā)揮。?

而Passthrough Camera API的出現(xiàn)，打破了這一僵局。借助該API，應(yīng)用得以獲取Passthrough Camera的視頻源，并運(yùn)用專有計(jì)算機(jī)視覺算法與AI模型，對(duì)用戶所處環(huán)境展開深度分析。這一技術(shù)革新，為混合現(xiàn)實(shí)領(lǐng)域注入了新的活力，開辟出無限可能。?

回顧Passthrough Camera API的發(fā)展歷程，它于Meta Connect 2024首次亮相，并在今年3月中旬以實(shí)驗(yàn)狀態(tài)推出。彼時(shí)，受限于其狀態(tài)，該API無法在Horizon Store應(yīng)用中使用。如今，隨著版本升級(jí)，這一限制被徹底解除，標(biāo)志著CPA邁向成熟，也預(yù)示著混合現(xiàn)實(shí)應(yīng)用生態(tài)即將迎來新一輪變革。