Meta AI研究人員正趨向于在沒有額外追蹤硬件的情況下呈現(xiàn)逼真化身腿部顯示。

盡管實(shí)現(xiàn)開箱即用，目前的VR系統(tǒng)只能追蹤用戶的頭部和手部位置，而肘部、軀干和腿部位置可基于一類稱為反向運(yùn)動(dòng)學(xué) (IK) 的算法來估計(jì)，但這只是有時(shí)僅對(duì)肘部準(zhǔn)確，很少正確定位腿部位置。

鑒于IK的局限性，如今的一些VR應(yīng)用只能顯示用戶手部，許多應(yīng)用更只能顯示用戶上半身?；赟teamVR追蹤支持的PC VR追蹤器，例如HTC Vive Tracker，實(shí)現(xiàn)全身追蹤需要足夠多的追蹤器，不但花費(fèi)不菲，且多數(shù)游戲并不支持。

去年9月，Meta AI研究人員展示了一個(gè)經(jīng)過強(qiáng)化學(xué)習(xí)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)——QuestSim，其僅需Quest 2及其手柄的追蹤數(shù)據(jù)便能估計(jì)出一個(gè)合理的全身姿勢。不過QuestSim的延遲為160毫秒——在72Hz下超過11幀。該方案只適合看到他人的腿部化身，低頭時(shí)是看不到己身的。

而在一篇名為“Avatars Grow Legs ( AGRoL )”的新論文中，另一批Meta AI研究人員演示了一種新方法，他們聲稱這種方法“實(shí)現(xiàn)了最先進(jìn)的性能”，并且計(jì)算要求低于其他 AI方案。AGRoL是一種擴(kuò)散模型，就像最近的AI圖像生成系統(tǒng)，如Stable Diffusion和OpenAI DALL·E 2。

與其他擴(kuò)散模型和大多數(shù)AI研究論文不同，研究人員表示，AGRoL“可以在NVIDIA V100上實(shí)時(shí)運(yùn)行”，運(yùn)行速度約為41 FPS。盡管NVIDIA V100價(jià)格高達(dá)1.5萬美元，但相信經(jīng)過幾年優(yōu)化，最終將能在智能手機(jī)上運(yùn)行。例如，Google Assistant和Siri中使用的語音識(shí)別和合成模型就是這種情況。

盡管如此，目前沒有跡象表明AGRoL身體姿勢會(huì)很快出現(xiàn)在Meta Quest產(chǎn)品中。Meta確實(shí)宣布了虛擬化身今年將獲得腿部顯示支持，但可能會(huì)采用不那么先進(jìn)的算法，且只適用于他人化身。

來源：UploadVR