Meta分享虛擬化身服裝逼真模擬最新研究

?? 由 文心大模型 生成的文章摘要

據(jù)UploadVR報(bào)道,Meta分享了一項(xiàng)關(guān)于虛擬化身服裝逼真模擬的最新研究。

該服裝解決方案建立在“Codec Avatars”(Meta開發(fā)由VR硬件傳感器實(shí)時(shí)驅(qū)動(dòng)的逼真化身長(zhǎng)期項(xiàng)目)之上,與傳統(tǒng)渲染不同,Codec Avatars采用一系列神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)以定義虛擬化身的外觀,然后根據(jù)傳感器數(shù)據(jù)輸入不斷編碼其當(dāng)前狀態(tài),最后將此狀態(tài)解碼為幾何圖形和最終輸出紋理。自從首次亮相以來,Codec Avatars團(tuán)隊(duì)已經(jīng)展示了該系統(tǒng)例如“更逼真的眼睛”、“兼具眼動(dòng)追蹤和麥克風(fēng)輸入”、“支持帶有FaceID的iPhone”以及接近完全真實(shí)的2.0版本在內(nèi)的的多次版本演變。

最新研究,“深度逼真物理模擬服裝外觀”(Deep Photorealistic Appearance for physical simulation Clothing)可將神經(jīng)網(wǎng)絡(luò)技術(shù)應(yīng)用于任何體型的服裝變形。

目前,該服裝系統(tǒng)基于NVIDIA RTX 3090 GPU以每秒13幀的速度運(yùn)行,但在機(jī)器學(xué)習(xí)領(lǐng)域,隨著時(shí)間推移,優(yōu)化將會(huì)帶來戲劇性的變化,而今天智能手機(jī)上的語音合成和對(duì)象識(shí)別算法也曾經(jīng)需要基于昂貴的PC GPU實(shí)現(xiàn)。

當(dāng)下的Meta Avatars具有基本的卡通藝術(shù)風(fēng)格,未來,虛擬化身將適用于復(fù)雜環(huán)境下的大型社交需求,最終,Codec Avatars可能會(huì)變成一個(gè)單獨(dú)選項(xiàng),而不是當(dāng)今卡通化身的直接迭代,Meta首席執(zhí)行官扎克伯格描述了這樣一個(gè)未來,你可能會(huì)在休閑游戲中使用“表現(xiàn)主義”化身,在工作會(huì)議中使用“現(xiàn)實(shí)主義”化身。

今年4月,負(fù)責(zé)Codec Avatars團(tuán)隊(duì)的Yaser Sheikh表示,無法預(yù)測(cè)Codec Avatars離實(shí)際推出還有多久,但離上市并不會(huì)太遙遠(yuǎn)。

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明出處」