早在2015年，蘋果公司收購了蘇黎世的創(chuàng)企Faceshift，該公司的技術(shù)最終被用于創(chuàng)建Animoji和Memoji。美國商標專利局在2019年授予蘋果一項源于Faceshift的專利。而蘋果獲得的關(guān)鍵Faceshift專利之一最早可以追溯到2013年，現(xiàn)在這項專利由美國專利局在2023年1月26日公布。

該專利的主要發(fā)明人是蘋果高級軟件工程師Mark Pauley和Faceshift最初的工程師之一Sofien Bouaziz。Bouaziz在他的簡介中寫道：“設(shè)計、開發(fā)和產(chǎn)品化了為iPhone X Animoji提供動力的實時人臉追蹤算法，也可通過ARKit提供給第三方開發(fā)者。” Bouaziz于2018年離開蘋果進入谷歌工作，而他現(xiàn)在是Meta的XR Presence總監(jiān)。

從技術(shù)上講，該發(fā)明涉及一種實時面部動畫的制作方法及一種處理設(shè)備。該方法包括提供一個動態(tài)表情模型，接收對應(yīng)于用戶面部表情的追蹤數(shù)據(jù)，根據(jù)動態(tài)表情模型和追蹤數(shù)據(jù)估計追蹤參數(shù)，并根據(jù)追蹤數(shù)據(jù)和估計的追蹤參數(shù)完善動態(tài)表情模型。該方法可進一步包括基于追蹤參數(shù)生成與用戶的面部表情相對應(yīng)的圖形表示。本實施方案涉及一個實時面部動畫系統(tǒng)。

蘋果公司的專利圖1顯示了該專利一個實施例的動態(tài)表情模型示意圖；圖3顯示了一個優(yōu)化管道的流程圖。

蘋果公司的專利圖4顯示了使用所披露主題的實施方案生成的虛擬化身的圖形表示；圖5是根據(jù)一個實施例的方法流程圖。

蘋果公司的專利圖7顯示了用于近似用戶面部表情的不同混合形狀權(quán)重集；圖8描述了根據(jù)一個實施例使用不同動態(tài)表情模型對中性面部表情進行初步估計的結(jié)果。

想了解更多專利細節(jié)，請查閱蘋果的專利申請US 20230024768 A1。

來源：patentlyapple