
據(jù)RoadtoVR報(bào)道,WWDC 2022期間,蘋果宣布iPhone用戶將能基于iOS 16掃描耳朵形狀,以創(chuàng)建更準(zhǔn)確空間音頻。相比之下,由于需要復(fù)雜的設(shè)備,為消費(fèi)者創(chuàng)建的自定義“HRTF”曾被為是不切實(shí)際的,而如今,隨著計(jì)算機(jī)視覺技術(shù)的進(jìn)步使得該功能更容易實(shí)現(xiàn)。
當(dāng)涉及數(shù)字空間音頻時(shí),在不考慮用戶頭部和耳朵獨(dú)特形狀情況下,音頻“位置”或“3D”感精確度是有限的。
因?yàn)槊總€(gè)人都有一個(gè)形狀獨(dú)特的頭部,尤其是耳朵,因此來自現(xiàn)實(shí)世界的聲音會(huì)以不同的方式反射至耳朵。而為了創(chuàng)建高精度數(shù)字空間音頻感,往往需要一個(gè)能夠解析聲音因素的模型,即塑造一個(gè)將音頻與用戶頭部和耳朵相融合的數(shù)學(xué)模型。為此,聽力學(xué)家用一種名為“頭部相關(guān)傳遞函數(shù)(HRTF)”的數(shù)學(xué)模型描述了這一現(xiàn)象,基于HRTF,數(shù)字音頻則可以被修改,以復(fù)制個(gè)人耳朵特有的空間音頻提示。
盡管如今實(shí)時(shí)應(yīng)用HRTF技術(shù)已容易實(shí)現(xiàn),但仍然存在一個(gè)問題,每個(gè)人都需要定制化HRTF,這涉及準(zhǔn)確測(cè)量每個(gè)人的每只耳朵,倘若沒有專門的設(shè)備,則很難施行。
而現(xiàn)在,蘋果表示,其將基于最新iPhone的先進(jìn)傳感器,支持用戶掃描頭部和耳朵,并根據(jù)掃描數(shù)據(jù)創(chuàng)建自定義空間音頻配置文件。
蘋果并不是第一家基于計(jì)算機(jī)視覺耳朵模型定制HRTF的公司,但蘋果將該技術(shù)內(nèi)置至iOS中必然會(huì)促進(jìn)這項(xiàng)技術(shù)的廣泛采用。
WWDC 2022主題演講期間,蘋果正式宣布該功能是即將推出的iOS 16更新的一部分,iOS 16更新將于今年晚些時(shí)候發(fā)布,該功能將支持在帶有TrueDepth相機(jī)系統(tǒng)的iPhone上運(yùn)行,包括iPhone 10及更高版本。
但是,僅僅依靠一個(gè)準(zhǔn)確的耳朵模型是不夠的,蘋果還需要開發(fā)一種自動(dòng)化流程以模擬真實(shí)聲音與獨(dú)特幾何形狀耳朵的交互方式,最終,這項(xiàng)功能將會(huì)為iPhone(未來也將應(yīng)用于蘋果AR/VR頭顯)帶來更精確的數(shù)字空間音頻。
這將與蘋果產(chǎn)品現(xiàn)有空間音頻功能相適配,特別是與AirPods一起使用時(shí),AirPods可以追蹤用戶頭部運(yùn)動(dòng),以使用戶獲得相應(yīng)的空間音頻體驗(yàn),另外,iOS和MacOS都支持“開箱即用”空間音頻——采用標(biāo)準(zhǔn)音頻并使其聽起來好像來自房間中的揚(yáng)聲器,并準(zhǔn)確播放專門為空間音頻制作的聲音,例如Apple Music的杜比全景聲(Dolby Atmos)曲目。
此外,該功能還有另一個(gè)潛在用途,如果蘋果支持用戶下載自定義HRTF配置文件,或也支持該文件配置于其他設(shè)備(例如蘋果AR/VR頭顯)。








