余波
盡管從Vista開始的代替產(chǎn)品基本都是基于軟件制造的,也有少部分硬件加速的解決方案,比如AMD的TrueAudio技術(shù)(一種免費(fèi)又簡單的實(shí)時無損音頻編解碼器),它們利用GPU 進(jìn)行運(yùn)算,從而創(chuàng)造精準(zhǔn)的3D音效。當(dāng)我們想起聲音是一種物理現(xiàn)象,再想想GPU在物理渲染中日益遞增的作用(比如 Nvidia 的PhysX),說GPU也能夠計(jì)算出精準(zhǔn)的沉浸式 3D 音效似乎也不那么牽強(qiáng)。然而,如今的3D音效領(lǐng)域依然支離破碎。
事到如今,我們再回過頭來看,究竟解決方案是軟件還是硬件已經(jīng)不那么重要了。重要的是能實(shí)現(xiàn)真正的空間定位,創(chuàng)造環(huán)境氛圍??梢哉f近十年來,這些過程常常是敷衍了事。隨著VR的到來,對真正的3D音效的需求總算到頭了(現(xiàn)在3D音效真的能到你的“頭”里)。
歡迎光臨
VR的一切都是關(guān)于沉浸感。Oculus Rift特別強(qiáng)調(diào)了臨場感的概念,或是肉體上感覺自己正身處于某一環(huán)境中。視覺和聽覺都能使這種感覺更加逼真。
在VR中,能實(shí)現(xiàn)沉浸感和臨場感畫面的主要方式就是通過低延遲的頭部追蹤,當(dāng)你轉(zhuǎn)頭,在地上匍匐前進(jìn)時,顯示屏能以幾乎無法察覺的延遲匹配你的實(shí)時視野。有趣的是,頭部追蹤系統(tǒng)也恰好是為什么真正的3D音效至關(guān)重要的原因。
在現(xiàn)實(shí)生活中,我們常常會微微轉(zhuǎn)動,或者抬高頭部以確定某個聲音的確切來源,我們的大腦會記錄下這些聲音的差異。鼠標(biāo)視角某種程度上能模仿這樣的行為,因此對于鼠標(biāo)游戲來說3D音效是個不錯的選擇,但是頭部追蹤系統(tǒng)對于 3D 音效的需求幾乎是強(qiáng)制的。
3D音效:VR的必需品
VR中的音效可以成為臨場感的點(diǎn)睛之筆,也能成為敗筆。正確執(zhí)行的3D音效能加強(qiáng)一個場景的臨場感,給玩家們傳遞各種物體的位置信息,以及環(huán)境信息。能夠通過頭部運(yùn)動追蹤一個運(yùn)動中的物體固然很重要,能夠聽見與這個物體實(shí)時位置所匹配的聲音也同樣重要。視覺和聽覺可以相互加強(qiáng),一旦這兩種感覺互相沖突,沉浸感就消失了。
想象一下你看見一個物體在你的身體上方,但聽上去卻像是在邊上;或者是你在聽一個角色講話,但是無論你的頭轉(zhuǎn)向何方,聲音似乎總是從正前方傳來。如果真的這樣,沉浸感就成了一個笑話,那也就更不用談什么臨場感了。
3D音效非常重要,因?yàn)楫?dāng)我們聽到那些可以感覺到的聲音時,聽覺幾乎可以替代我們無法實(shí)現(xiàn)的觸覺,比如我們聽到了風(fēng)從臉上吹過的聲音,或者雨落在身邊的聲音。來看看這個Oculus Connect 大會上的視頻(翻墻看~),你可以對3D音效對于 VR 的重要性有更進(jìn)一步的了解。
但這并不是說沒有優(yōu)秀的3D音效,沉浸感就沒有了,而是真正的3D音效能將這種感覺放大至無限。這就是為什么 VR 如此堅(jiān)決地推崇整合了空間定位和環(huán)境氛圍的真正 3D 音效。
然而有點(diǎn)反常的就是,由于耳朵對于聲音的連續(xù)性判斷和準(zhǔn)確定位,利用 HRTF 的耳機(jī)似乎總比揚(yáng)聲器傳遞更逼真的 3D 音效。
音頻復(fù)蘇
在2014年,Oculus授權(quán)VisiSonic的音頻技術(shù),并最終將其融入Oculus Audio SDK 中。這項(xiàng)技術(shù)非常依賴定制的HRTF,通過耳機(jī)來再現(xiàn)精準(zhǔn)的空間定位,這其實(shí)也是Aureal在20年前就推出的技術(shù)。
最棒的部分不僅僅是Oculus將這項(xiàng)技術(shù)整合進(jìn)了他們的Audio ADK中,而且他們還免費(fèi)供應(yīng),甚至不僅僅在 VR 平臺上免費(fèi),其他任何平臺上也是免費(fèi),包括傳統(tǒng)PC平臺也是。盡管市面上也有很多各種各樣的三方音頻解決方案,但 Oculus 這么做也是為大家提供了一個高質(zhì)量,并容易上手的3D音效基準(zhǔn),甚至為游戲內(nèi)真正的3D音效定了起跑線,這條起跑線在快十年前DirectSound3D隕落時就不見了蹤影。
一段時間以來3D音效都處于一個“奄奄一息”的狀態(tài),或者你也可以樂觀地說,它需要被復(fù)蘇。多虧了VR的到來,人們終于證實(shí)了3D音效復(fù)蘇的重要性。3D音效再也不是備選的調(diào)味料了,它是一個非常重要的原材料,是可以放大、倍增整個VR體驗(yàn),可以將臨場感和沉浸感提升到圖形永遠(yuǎn)無法企及高度的重要元素。