解讀:簡(jiǎn)要了解VR音頻相關(guān)技術(shù)
VR或3D音頻通常被稱作是空間化,空間音頻就好像聲音來(lái)源于3D空間中的特定位置。該技術(shù)對(duì)提供深度沉浸感十分關(guān)鍵,因?yàn)槁曇魰?huì)給我們提供重要的線索,讓我們知道自己在真實(shí)三維環(huán)境中的位置。如同定位技術(shù)一樣,空間化取決于兩個(gè)關(guān)鍵因素:方向和位置。
本文引用地址:http://m.butianyuan.cn/article/201611/339992.htm
HRTF(頭相關(guān)變換函數(shù))與定向空間化
根據(jù)來(lái)源方向的不同,我們耳朵的幾何形狀和結(jié)構(gòu)會(huì)相應(yīng)地改變聲音。頭相關(guān)變換函數(shù)(HRTF)會(huì)以這些不同的效果為基礎(chǔ),然后用于定位聲音。
如何記錄HRTF
要采集HRTF,人們需要進(jìn)入到消聲室中,戴上耳機(jī),然后在每個(gè)可能的方向播放聲音,并通過(guò)耳機(jī)記錄那些聲音。把記錄到的聲音與原始聲音進(jìn)行比較,從而計(jì)算出具體的HRTF數(shù)據(jù)。這是因?yàn)閮芍欢浜涂捎脴颖炯枰谙喈?dāng)多的離散方向記錄聲音。當(dāng)然,并不是每個(gè)人都具有相同的身體特征,也不可能記錄每個(gè)人的HRTF,因此像微軟研究院和Oculus這樣的實(shí)驗(yàn)室會(huì)使用適合大多數(shù)情況的通用參考集,特別是當(dāng)與頭部追蹤相結(jié)合時(shí)的參考。
HRTF應(yīng)用
在準(zhǔn)備好HRTF集之后,如果開(kāi)發(fā)者知道自己想要聲音出現(xiàn)的位置或來(lái)源方向,他們就可以選擇適當(dāng)?shù)腍RTF數(shù)據(jù)并將其應(yīng)用于聲音之中。這是以所謂的“時(shí)域卷積”或“FFT/IFFT”形式進(jìn)行實(shí)現(xiàn)。所以這些公司基本上會(huì)過(guò)濾音頻信號(hào),讓聲音聽(tīng)起來(lái)像是來(lái)自一個(gè)特定的方向。這聽(tīng)起來(lái)好像很容易,但實(shí)際上成本十分昂貴,很難開(kāi)發(fā)。
評(píng)論