
固件發(fā)現(xiàn)表明Meta正將其逼真的“編解碼器化身”(Codec Avatars)引入Quest頭顯。
Codec Avatars是Meta長期研發(fā)項目,旨在通過具備面部追蹤傳感器的頭顯以及眼鏡實時驅動照片級真實化身,從而徹底改變遠程通信。Meta于2019年首次透露了該項目的存在,并在隨后的幾年中展示了多個更新版本。
雖然Codec Avatars一直被描述為處于研究領域,但一項新的發(fā)現(xiàn)表明,Codec Avatars可能會成為Quest的一項功能。
VR愛好者Luna通過反編譯Meta Quest固件62版發(fā)現(xiàn)了對Codec Avatars的引用,該固件目前可供公共測試頻道的測試人員使用。
過去,我們已經(jīng)多次以這種方式發(fā)現(xiàn)即將推出的Quest功能。這表明,Meta正努力在Quest 集成該功能。
去年3月,Meta首席技術官博斯沃思表示,公司在發(fā)布Codec Avatars方面“取得了進展”,但提示“我們還需要幾年的時間”。

目前還不清楚該功能是為現(xiàn)有的Quest頭顯還是未來的Quest Pro 2開發(fā)。
同樣在去年3月,Meta Quest硬件路線圖被The Verge披露。除了Quest 3和即將推出的更廉價的頭顯(傳聞為Quest 3 Lite),該路線圖還提到了一款新的Quest Pro頭顯以及Codec Avatars。
但Meta可能打算將Codec Avatars引入現(xiàn)有的Quest Pro,甚至是Quest 2和Quest 3。
2021年,Meta研究人員展示了一種更加有效的解碼編解碼器化身的方案。在Quest 2上,新方案可在空白場景中以72FPS的幀速渲染1個Codec Avatar,以63FPS左右的幀速渲染3個Codec Avatar,或者以43FPS左右的幀速渲染5個Codec Avatar。
但這些化身如何在缺乏面部和眼動追蹤功能的Quest 2和Quest 3上驅動呢?Meta研究人員還展示了不需要面部追蹤的Codec Avatars版本,最近甚至推出了根本不需要任何追蹤功能的版本。相反,來自麥克風的音頻被輸入神經(jīng)網(wǎng)絡,神經(jīng)網(wǎng)絡可預估當前語音模式可能的面部姿勢。

盡管如此,Meta完全有可能希望為Quest Pro 2保留足夠強大的編解碼器化身,以支持Horizon Workrooms會議中的Codec Avatar,以通過真實面部追蹤來驅動。
此外,Meta研究人員一直致力于用智能手機掃描來取代由100多個攝像機組成的專用捕獲設備生成Codec Avatar的過程,這是大規(guī)模交付Codec Avatar所必需的,但生成效果可能不盡理想。Quest Pro 2可能包括一個前置顯示屏和用于化身設置的深度傳感器,就像Apple Vision Pro用于其數(shù)字角色一樣,但同樣仍然無法匹配專門的捕獲裝置。
盡管如此,任何版本的Codec Avatars都將比Meta當前的化身會有巨大的改進,后者具有基本的卡通藝術風格,并與照片寫實主義相差甚遠。








