據(jù)UploadVR報(bào)道，Meta“Codec Avatars”現(xiàn)在可以通過iPhone掃描生成。

Facebook于2019年3月首次展示了“Codec Avatars”，其基于一個(gè)配置有5個(gè)攝像頭（2個(gè)攝像頭內(nèi)部觀察、3個(gè)攝像頭外部觀察）的原型VR頭顯構(gòu)成的多神經(jīng)網(wǎng)絡(luò)而驅(qū)動(dòng)，而經(jīng)過多次例如“更逼真的眼睛”、“支持眼動(dòng)追蹤和麥克風(fēng)輸入”等優(yōu)化改進(jìn)，Codec Avatars 2.0版本已接近具備完全真實(shí)感。

以往，生成一個(gè)單獨(dú)的“Codec Avatar”需要通過“MUGSY”專用捕獲設(shè)備和171個(gè)高分辨率攝像機(jī)共同完成，如今，Meta的最新研究擺脫了這一要求，基于配備了前置深度傳感器的智能手機(jī)（例如帶有FaceID的iPhone），用戶掃描面部后便能生成虛擬化身（可同時(shí)復(fù)制65個(gè)面部表情）。

研究人員稱，面部掃描過程平均只需3分半鐘，而實(shí)際生成具有完整細(xì)節(jié)的虛擬化身則需要6個(gè)小時(shí)，不過Meta“Codec Avatars”虛擬化身生成過程或通過云端執(zhí)行，而無須通過用戶設(shè)備。

那么，過去需要100多個(gè)攝像頭的捕獲成像，現(xiàn)在是如何做到只需要一部手機(jī)就能達(dá)成呢？這其中的訣竅在于“超網(wǎng)絡(luò)”（hypernetwork、權(quán)重神經(jīng)網(wǎng)絡(luò)），為此研究人員通過采用先進(jìn)的捕獲設(shè)備（類似于MUGSY，但只有90個(gè)攝像頭）掃描255個(gè)不同個(gè)體的面部以訓(xùn)練“UPM超網(wǎng)絡(luò)”。

盡管已有其他研究人員展示了基于智能手機(jī)掃描的虛擬化身，但Meta聲稱其結(jié)果是最先進(jìn)的，目前，該系統(tǒng)還無法處理眼鏡及長(zhǎng)發(fā)，并且僅限于掃描面部。

當(dāng)然，要達(dá)到產(chǎn)品交付的保真度，Meta還有很長(zhǎng)的路要走，今天的“Meta Avatars”具有鮮明的卡通藝術(shù)風(fēng)格，且虛擬角色的真實(shí)性實(shí)際上會(huì)隨著時(shí)間的推移而降低，這使得其可能更適合通過Quest 2驅(qū)動(dòng)的「Horizon Worlds」等大型社交應(yīng)用。

最終，“Codec Avatar”會(huì)成為一個(gè)單獨(dú)的選項(xiàng)，而不是當(dāng)今卡通化身的直接更新，在接受Lex Fridman采訪時(shí)，Meta首席執(zhí)行官扎克伯格描述了這樣一個(gè)未來，你可能會(huì)在休閑游戲中采用“表現(xiàn)主義”化身，而在工作會(huì)議中采用“現(xiàn)實(shí)主義”化身。今年4月 ，“Codec Avatar”負(fù)責(zé)人Yaser Sheikh曾表示，暫且無法預(yù)測(cè)該系統(tǒng)的具體推出時(shí)間。