如何打造電影級VR的音頻效果？他在VRDC是這么說(shuō)的

聚焦VRDC峰會(huì )從創(chuàng )意、思考、技術(shù)等角度分享VR AR開(kāi)發(fā)經(jīng)驗。

今年的游戲開(kāi)發(fā)者大會(huì )（GDC2016）上首次開(kāi)設了虛擬現實(shí)開(kāi)發(fā)者專(zhuān)場(chǎng)VRDC，聚焦VR/AR開(kāi)發(fā)。在為期兩天的專(zhuān)場(chǎng)討論中，來(lái)自全球范圍內的眾多開(kāi)發(fā)者針對游戲和娛樂(lè )兩大領(lǐng)域，從創(chuàng )意、思考、技術(shù)等角度分享了VR/AR開(kāi)發(fā)經(jīng)驗。

VREYES對VRDC峰會(huì )上相關(guān)演講和視頻進(jìn)行了整理，將陸續給大家帶來(lái)VR/AR的干貨分享。

本次分享的是主題是《如何打造電影級VR的音頻效果》，由Two Big Ears產(chǎn)品副總裁Varun Nair和聲音技術(shù)總監Jean-Pascal Beaudoin帶來(lái)。

通常來(lái)說(shuō)，音頻工作需要將游戲音頻制作和后期音頻制作中最好的創(chuàng )意進(jìn)行融合。在演講中，兩位制作人對音頻后期混合技術(shù)、渲染技術(shù)和工具使用進(jìn)行了講解，并通過(guò)具體的實(shí)例予以說(shuō)明。同時(shí)，兩位制作人同樣也對未來(lái)音頻工具和技術(shù)如何改進(jìn)來(lái)創(chuàng )造獨特的VR音頻進(jìn)行了探討。

打造電影級VR音頻的工作流程是怎樣的？

實(shí)現標準化工作流程；

不斷去突破技術(shù)與創(chuàng )意的邊界；

改造并不是唯一答案；

創(chuàng )造、打破常規與學(xué)習。

工作流程

游戲中的音頻與電影級VR中的音頻

游戲音頻通常是在音頻工作站進(jìn)行制作，可以進(jìn)行設備預覽，導出后，在應用中重新進(jìn)行合成。

電影級VR則通過(guò)音頻中間件進(jìn)行制作，最終在游戲里通過(guò)事件觸發(fā)。

電影級VR的音頻語(yǔ)言

電影音頻和游戲音頻在很多方面都很相似，但將兩種音頻理論和概念運用到VR電影中時(shí)需要格外注意它們之間存在的不同。

沉浸感與臨場(chǎng)感

關(guān)于沉浸感與臨場(chǎng)感，我們要知道這是兩個(gè)完全不同的東西。沉浸感主要是指技術(shù)能從物體的視角傳遞出什么，而臨場(chǎng)感則指一個(gè)人的反應，反饋處于什么樣的沉浸水平。而產(chǎn)生的代入感和興趣的發(fā)生與內容有關(guān)，與形式無(wú)關(guān)。

沉浸式音頻是十分關(guān)鍵的元素，與拍攝手法、演技一樣為實(shí)現VR電影臨場(chǎng)感而服務(wù)。

需要知道的是，它不僅僅與使用基于定位的音頻有關(guān)。

一些理念和建議

一、理解VR中的“音場(chǎng)”（Field of audition）

其中，劇情聲（Diegetic Sound）是指畫(huà)面中可知音源的區域的聲音，這些區域中的聲音能夠被角色感知和理解，這個(gè)區域在用戶(hù)當前的場(chǎng)視角（FOV）中是可見(jiàn)的。通常占據虛擬環(huán)境30%的區域，并具有空間化的特點(diǎn)。

而Acousmatic Sound是指你可以聽(tīng)到的聲音，但音源位置在用戶(hù)當前場(chǎng)視角外，通常會(huì )留有聲音線(xiàn)索。

外在劇情聲（Non-Diegetic Sound），指角色聽(tīng)不到但觀(guān)看者從屏幕上伴隨著(zhù)的動(dòng)作能夠認出的聲音。例如，語(yǔ)音旁白等。

當然還有一種叫中繼劇情聲或元劇情聲（Meta-Diegetic Sound），它作為虛擬環(huán)境的一部分無(wú)法被其它角色聽(tīng)到，但是旁觀(guān)者會(huì )感知到。

二、善用聲音線(xiàn)索，不要過(guò)度使用

三、為你的劇情聲發(fā)生的空間增加“深度”（或層次感）

像這張圖里，打開(kāi)窗戶(hù)，讓?xiě)敉獾穆曇羧谌氲侥愕呐臄z場(chǎng)景中。

四、敘事串場(chǎng)時(shí)靈活運用不同的音場(chǎng)效果

在勒布朗·詹姆斯的這部VR影片中，就很好地運用了轉場(chǎng)時(shí)的音場(chǎng)效果變化，從這一幕的劇情聲變化到下一幕的外在劇情聲。

這一慕中他正在對你講述自己的故事，因此是劇情聲，到了下一幕以及接下來(lái)幾幕他的聲音就成了旁白，因此就要運用外在劇情聲。

五、這是全新的介質(zhì)，要大膽創(chuàng )新，不怕失??！

例如頭部追蹤式敘事方式：取決于觀(guān)看者在看哪個(gè)角色，他可以聽(tīng)到該角色的聲音，而其他人的聲音幾乎會(huì )被靜音。

還有一些結合外部硬件進(jìn)行多種模式的實(shí)驗：在某些特殊的場(chǎng)景（例如上圖的侏羅紀世界），觀(guān)看者坐在裝備了高保真觸摸式低音系統的椅子上，會(huì )感受到聲音傳遞的低頻震動(dòng)，提供了對生效的額外感知，從而加深了沉浸感。電

影級VR體驗未來(lái)將會(huì )是什么樣的？

關(guān)于未來(lái)VR電影體驗是什么樣的，我們沒(méi)有答案（需要自己去尋找）。但有一點(diǎn)很重要，那就是線(xiàn)性敘事結構與互動(dòng)式敘事之間的需要有一座橋梁。

最后，記得關(guān)注微信公眾號：鎂客網(wǎng)（im2maker），更多干貨在等你！