Meta Quest Pro面部追蹤功能將很快啟用，這一功能將使Meta虛擬化身更具表現(xiàn)力且獲益良多。

Quest Pro一大新功能是面部追蹤系統(tǒng)，它使用內(nèi)部攝像頭來感知用戶眼睛和面部表情動(dòng)作，結(jié)合了免校準(zhǔn)的機(jī)器學(xué)習(xí)模型，并基于頭顯轉(zhuǎn)化為虛擬角色。

Meta已發(fā)布了供開發(fā)者試驗(yàn)的Aura面部追蹤示例，以及與“運(yùn)動(dòng) SDK”相關(guān)的其他三個(gè)開發(fā)者示例，這為開發(fā)者創(chuàng)建眼動(dòng)、面部和身體追蹤奠定了基礎(chǔ)。

在短期內(nèi)，這將與Meta現(xiàn)有虛擬化身一起使用，雖然這些改進(jìn)使虛擬化身更具表現(xiàn)力，但實(shí)際看起來化身并不靈敏。

這可能是當(dāng)前虛擬化身系統(tǒng)在構(gòu)建時(shí)沒有考慮到高級(jí)面部追蹤——模型的底層動(dòng)畫框架——似乎不太適合這項(xiàng)任務(wù)，從而使得Quest Pro面部追蹤輸入移植到當(dāng)前系統(tǒng)并不能真正發(fā)揮其實(shí)際能力。

幸運(yùn)的是，Meta已重構(gòu)建了一個(gè)技術(shù)演示，展示了在設(shè)計(jì)化身時(shí)考慮到Quest Pro面部追蹤（以及幾乎所有頭顯處理面部追蹤渲染）的可能性。

Meta表示將把Aura演示作為一個(gè)開源項(xiàng)目發(fā)布，這樣開發(fā)者就可以知道面部追蹤輸入附加到化身的機(jī)制，Meta還表示，開發(fā)者將能使用單一工具集來驅(qū)動(dòng)人形化身或動(dòng)物、怪物等非人類化身，而無需進(jìn)行單獨(dú)調(diào)整。

Meta指出，開發(fā)者將能夠利用面部追蹤API，該API使用與FACS相對(duì)應(yīng)的值，F(xiàn)ACS是一種被廣泛識(shí)別的系統(tǒng)，用于描述人臉不同肌肉的運(yùn)動(dòng)。

這不僅是代表人臉的有效系統(tǒng)，而且還為用戶形成了有用的隱私屏障。Meta表示，開發(fā)者實(shí)際上無法訪問用戶面部的原始圖像。而在歐洲工商管理學(xué)院，實(shí)驗(yàn)者獲得了“一系列從0到1的值，這些數(shù)值與一系列通用的面部動(dòng)作相對(duì)應(yīng)，比如當(dāng)你揉鼻子或皺眉時(shí)，這些信號(hào)使開發(fā)者在將信號(hào)從面部追蹤API映射到角色時(shí)，更容易保留玩家原始動(dòng)作的語義，無論角色是人形還是更奇幻的東西?！?/p>

來源：RoadtoVR