Facebook展示逼真虛擬化身研究成果

?? 由 文心大模型 生成的文章摘要
Facebook Reality Labs(FRL)首席科學(xué)家Michael Abrash認(rèn)為AR和VR將成為人們未來工作,娛樂和連接的主要方式。
被稱為“Codec Avatars”的匹茲堡辦事處正在采用“突破性3D捕捉技術(shù)和人工智能系統(tǒng)”來生成逼真的虛擬化身,這些虛擬化身可以為未來快速輕松的個(gè)人化身創(chuàng)作者提供基礎(chǔ)。
FRL Pittsburgh的研究主管Yaser Sheikh說,這個(gè)想法是縮短物理距離,并在虛擬現(xiàn)實(shí)中創(chuàng)造社會(huì)聯(lián)系,就像“現(xiàn)實(shí)世界中的自然和共同”一樣。
“這不僅僅是關(guān)于尖端圖形或高級(jí)運(yùn)動(dòng)跟蹤,這是為了讓它在虛擬現(xiàn)實(shí)中與人們進(jìn)行自然而輕松的互動(dòng),就像在你面前的人一樣。挑戰(zhàn)在于在人工環(huán)境中創(chuàng)造真實(shí)的互動(dòng)。”
一個(gè)演示展示了兩個(gè)VR用戶與栩栩如生的虛擬人物交談,讓人們對(duì)VR虛擬形象的未來有了一個(gè)有趣的了解。
Facebook表示,這些實(shí)時(shí)逼真的虛擬形象需要相當(dāng)多的裝備來實(shí)現(xiàn)。然而,最終的目標(biāo)是通過輕巧的頭顯實(shí)現(xiàn)所有這一切,F(xiàn)RL Pittsburgh目前使用原型頭戴式捕捉系統(tǒng)(HMC)配備了攝像頭,加速度計(jì),陀螺儀,磁力計(jì),紅外線照明和麥克風(fēng),以捕捉全系列人類的表達(dá)。
“編解碼器頭像需要捕捉你的三維輪廓,包括你移動(dòng)方式的所有細(xì)微之處。”該實(shí)驗(yàn)室使用一小組參與者,每秒捕獲1GB數(shù)據(jù),以創(chuàng)建物理特征數(shù)據(jù)庫。在未來,希望消費(fèi)者能夠在沒有捕獲工作室且沒有太多數(shù)據(jù)的情況下創(chuàng)建自己的化身。
目前,體積捕獲持續(xù)約15分鐘,并且需要大量相機(jī)來創(chuàng)建最逼真的虛擬化身。然后,該實(shí)驗(yàn)室計(jì)劃使用這些捕獲來訓(xùn)練AI系統(tǒng),以便消費(fèi)者可以通過幾個(gè)快照或視頻快速輕松地構(gòu)建Codec Avatar。
FRL研究科學(xué)家Shoou-I Yu表示人類有各種不同的體積,“這讓我了解每個(gè)人的獨(dú)特之處。我們必須捕捉所有這些微妙的線索,以使一切正常運(yùn)作。這非常具有挑戰(zhàn)性。”


【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】