這個VR面罩可以讀懂你的面部表情

?? 由 文心大模型 生成的文章摘要
當(dāng)去年Facebook馬克扎克伯格去年在臺上展示VR虛擬社交的時候,他在VR社交中以夸張的表情,定制的聲音和形象展示在觀眾面前。和復(fù)雜的非虛擬人臉捕捉相比,F(xiàn)acebook所提供的VR社交中的任務(wù)表情還很原始,不過現(xiàn)在則有好消息了。雖然情感對于虛擬存在來說是一個重要的部分,不過當(dāng)人們戴上VR頭顯的時候外界卻很難看到人們的表情。一家神經(jīng)科學(xué)于計算公司MindMaze為大家?guī)砹朔奖懔畠r的解決方案。
MindMaze今天推出了新款MindMaze Mask。它是一個環(huán)形的電極,可以被安裝在任何VR頭顯泡沫面罩內(nèi)。當(dāng)你戴上VR頭顯的時候,面罩會自動監(jiān)測你面部皮膚的壓力,之后將這些數(shù)據(jù)和10種不同的面部表情相匹配。當(dāng)然該產(chǎn)品也有基于軟件的面部表情預(yù)測,這是為了減少響應(yīng)延遲問題。畢竟該產(chǎn)品無法實時監(jiān)測你的面部表情,它更像是用戶用他們的面部皮膚壓力變化來和系統(tǒng)中預(yù)存的臉部動畫相匹配。
該想法的目的并非是要打造一款消費級產(chǎn)品,而是希望頭顯制造商能夠?qū)⒃摷夹g(shù)集成到頭顯之中。MindMaze的CEO Tej Tadi對913VR表示,該公司已經(jīng)和幾個合作伙伴進行過洽談,并且相應(yīng)的頭顯產(chǎn)品應(yīng)該會在年底前完成整合。這可能包括OSVR HDK2,微軟頭顯以及蔡司VR頭顯。
雖然尚不清楚該面罩是否會集成到HTC Vive以及Oculus Rift這類頭顯之中,不過目前該技術(shù)對于面部表情的捕捉還不完善,對于面部的細(xì)節(jié)捕捉還不精確。MindMaze Mask可以識別適度的表情呈現(xiàn),不過當(dāng)用戶的表情過于夸張的時候,系統(tǒng)的頭像則會顯示為生氣的表情。MindMaze Mask對于眨眼動作同樣也不精準(zhǔn),用戶需要多嘗試幾次。此外MindMaze Mask的延遲也有待提高。
Mask也有很多的同類產(chǎn)品,不過他們要么非常有限,要么就是無法捕捉用戶面部表情。頭顯內(nèi)部的眼部追蹤技術(shù)可以識別一些面部的動作,不過這項技術(shù)在頭顯之中還很少見。一些頭像系統(tǒng)可以讓用戶手動完成表情設(shè)置,無需特殊的硬件產(chǎn)品,不過這需要額外的步驟,并且感覺很不自然。Facebook無需定制的技術(shù)或者輸入設(shè)備,而是從頭部、聲音以及手部的運動來進行面部表情推算。
Mask目前還處于開發(fā)階段,有些功能還并不完善。系統(tǒng)的一些面部動畫表情還很僵硬,有些情況下則無法順利呈現(xiàn)出用戶想要的表情。開發(fā)者可以將他們自己的表情混合進去,不過這要取決于傳感器的靈敏度。
這并不是說Mask不好,比過筆者在想它到底要如何在我們的現(xiàn)實世界中工作?如果這套系統(tǒng)只有20-30美元的成本,那么它的價值僅限于一些簡單和重要的情緒,比如微笑或者驚喜,否則你寧可用一些表情符號來代替。對于眨眼這個動作而言,一些系統(tǒng)已經(jīng)可以在頭像中自動呈現(xiàn)。
MindMaze Mask想法不錯,希望在今年年底推出的VR頭顯能夠看到該技術(shù)的應(yīng)用。

【913VR原創(chuàng)內(nèi)容,轉(zhuǎn)載請注明及回鏈】