如何運用 FB360 Spatial Workstation 做3D混音以及360影片後期製作

譯者:MidiMall業務一部 Gary/許庭毓

底下為這段影片的中文翻譯

你好。
我的名字是John Escobar。
在這個影片中,我們將看看Facebook Spatial工作站
以及如何在ambisonic混音項目中使用它。

讓我們先來看看套件中的不同插件。
我們應該看的第一個插件是Audio360 Spatialiser。
從本質上說,它是我們的360度聲像定位器。
這個插件應該放在專案的
每一個你想置入360環境中做空間化的音軌上。
它應該放在音軌所有插件的最後
如果你要進行任何其他插件的訊號處理,
你必須在它之前做完。
在左上角有一個輸入區塊。
這個輸入選單讓插件知道我們所用的
是什麼格式的音軌
我們可以使用單聲道、立體聲、環繞多聲道訊息,
或任何我們一階或二階的Ambisonics B格式
查看定位參數對我們來說很重要。
方位角是指我們的水平方向
換句話說,就是繞著我們左右的360度。
高度角是上下方位的存取點
這給了我們相關於我們所見景像
的高度信息
我們的距離參數決定了一個聲源物件
在360度全景空間中帶給觀看者的聽覺鄰近感
有了所有這些定位標記,
可以幫助我們建立頭部追蹤參數。
因此,當我們在360環境中移動時,
可以感覺物件有些在我們身後,有些在我們身邊。
接下來,我們將看一下Audio360 Control插件。
從本質上講,它是你播放輸出的主控制器。
這個插件在每個專案項目中只能存在一個實體。
我們還有一個360影片播放器。
讓我們能監看我們正在處理的混音和影片
一起出來的情況。
在前面的討論中,我們談到將A格式轉換為B格式,
當時我們提到了事實上有些時候
你需要旋轉你的Ambisonic場域來匹配景像。
因此,在這套件中的Converter插件中,
它能讓我們在事後進行旋轉,
以及從一種格式的Ambisonics轉換成另一種。
接下來我們應該看看如何度量Ambisonics。
我們在套件中有兩個版本的表頭插件
一個360響度表頭,在360空間環境中指示出我們的平均音量水平
以及另一個實際上不存在表頭的
立體聲響度計,
它從背景連入了360響度表插件。
允許我們同時監看頭部鎖定的立體聲音軌
和Ambisonics空間聲場的訊號。
最後,我們有我們的Audio360編碼器。
它允許我用最終混音的BUS來輸出並且合併到影片裡。
所以現在我將帶你了解如何設置我的工作階段。
我決定即時進行A到B格式的轉換。
所以在這裡你看到四個通道
通道1到4將A格式的Ambeo VR Mic訊號送進Ambeo Mic Master這個Bus
我把Ambeo A-to-B轉換器放到這裡
如果使用Sennheiser Ambeo麥克風的話可以免費下載
它允許我導入A格式訊號,並即時的
轉換成B格式輸出。
如果我播放它,你會看到,在左側,
我有A格式訊號輸入,可看到麥克風的
四個音頭的通道訊號
我能相對於相機來旋轉麥克風。
我能告訴它,它應該是什麼方向。
在這種情況下,麥克風是直立的。
我可以告訴它輸出格式。
當我點擊這些時,我看到輸出電平略有不同。
這是一個聽得見的差異。
這裡我繼續固定以​​AmbiX作為我的B格式輸出。
所以現在我將A格式訊號轉換成第一階的B格式AmbiX。
在這之下,我掛了一個Spatialiser插件。
因為它是一個Ambisonic錄音,我選擇B格式第一階
AmbiX作為這個插件的輸入訊號格式。
接下來,我想確保我
將影片鏈接到我的工作階段。
當我單擊“Load”按鈕時,它會自動打開影片播放器。
讓我選擇我要使用的影片。
請務必注意,您可能需要把相機捕獲的原始文件
轉換成DAW更容易接受的檔案格式。
接下來,我可以告訴它我想如何查看該影片
我是想單視還是並排渲染。
最後,我需要將它連接到DAW
選擇我的筆電來建立網路連線。
我可以打開它,它應該自動
打開我的影片播放客戶端以及把視頻加載到Spatialiser插件中。
在任何一個Spatialiser插件上執行此操作,
它將鏈接到所有具有Spatialiser插件的音軌。
請記住,在操作Ambisonic訊號的時候,
你已經有了前、後、左、右、上和下的資訊。
所以,我需要確保我的定位設計是校正
到麥克風相對於相機的正確位置上。
但除此之外,我不需過多處理這些定位標記。
晚點再針對單聲道或立體聲聲源定位做說明。
接下來,前往我的點聲源音軌。
對於這個錄音,我在Symphony Hall有一個弦樂四重奏
每個樂器都使用了獨立的麥克風。
我有小提琴1、小提琴2、大提琴和中提琴。
這些音軌中的樂器都擁有自己獨立的空間化插件
每一個都使用左邊或右邊的單聲道輸入。
所以為了展示空間化,我拿第一把小提琴
並告訴你我如何將其鎖定到圖片上
並啟用它可追蹤的頭部訊息。
因為我想要的是從小提琴發出的聲源,
我可以在影片上移動它,如你所見,
或者我可以用360 panner來移動它。
我還可以啟用跟踪訊息,一旦影片播放,
它將自動化擷取影片的方位數據。
這意味著如果這個樂手起身跑來跑去,
當我轉過身時我將會聽到以下情況。
因為聲源非常小,
我想要確保真正本地化的東西
我希望聲源中的細節來自小提琴的一部分。
我還可以處理麥克風與相機的距離。
一旦我覺得我對此感到滿意,
我現在可以即時的聽聽看出來的聲音如何
透過觀看我的影片播放客戶端。

當我在房間裡旋轉時,我會聽到聲源的變化
從我面前到我身後或上下。
接下來,我想確保每個相關的音軌
都使用了Spatialiser插件
所以在這情況下,就是我的四個點聲源收音麥
和我的Ambeo Master Bus音軌
都正確路由到Control插件所在的最末端BUS上。
請記住,Control插件是我的最末端主輸出。
在這裡我確保輸出是Decode為Binaural
以便在我收聽的時候,我能接受到
我Ambisonics訊號的雙耳渲染。
當我正在做這混音工作時
我在製作過程中始終保持這個設定。
但在之後一旦我想輸出的話,我就要
記得把它雙耳解碼關閉,以便我
能獲得我混音作品的完整Ambisonic訊號輸出。
我們曾討論一個事實,亦即我們可置入非空間化的聲源,
我們稱之為頭部鎖定音軌。
在這個工作階段,我設定了一對麥克風
分別收取左、右房間的聲音訊息。
它們被路由到我頭部鎖定的主音軌上。
在這個音軌上掛了一個Audio 360 Stereo Loudness插件。
這樣做是為了能把這個音軌拴到我的主BUS音軌上
我的主BUS上有一個360混合響度計。
事實上,這是我整體響度的參考儀表
參照於經過空間化的音軌及頭部鎖定音軌的內容,
並允許我即時監看我混音後的整體響度。
這意味著,如果我單獨聽我的頭鎖音軌
就是我的左右room麥,我打開這個
360混音響度計
即使在Stereo Loudness插件上面
它看起來並不像是有在做什麼事,
但現在我可以看到Stereo響度計實際上有發送訊息
到我的360響度指示表頭。
如果我將這些音軌靜音,我應該就看不到任何信號,
這是因為我工作階段中的其餘音軌都是靜音的。
如果我打開任何經過空間化之後的環繞聲源,
我現在便能看到360響度表上的Ambisonic訊號量。
除此之外,我選擇將轉換器插件放到同一軌道上。
這允許我做轉換
從一種ambisonic格式到另一種格式,或旋轉
我的Ambisonic麥克風場域來對齊相機。
在這裡我不一定需要這樣做,
因為我還沒有渲染成B格式的檔案。
所以我可以實時進行旋轉。

一旦我覺得整個混音有得到了足夠的動態和空間
我現在就可以準備從DAW裡面輸出這個混音了。
我可以標記開始和停止的時間點
來輸出最後的混音檔。
另外,如果你還記得Control控件插件
正在進行實時的雙耳解碼
所以現在在泵出檔案前,我想關閉Binaural解碼。
這能讓我完整輸出我全部的
第二階Ambisonics九通道訊號。
一旦我選擇好所有這些設定,我想確認
我輸出的取樣率是48KHz。
即使我可以用更高的取樣率錄製,
建議是以48k取樣率來泵出檔案。
我告訴它這裡有九個通道。
現在你可以看到Control插件正在輸出
全部9個非實時輸出的通道,我正在泵出
我最後的Ambisonic錄音。

現在我泵出了我的最終混音,
我可以使用我的Encoder來製成最終影片。
在我的Encoder插件頂部可以選擇格式
我要為這個影片做編碼。
在這裡我將創建一個Facebook 360視頻。
我可以告訴它這是什麼樣的空間音訊格式
是我接下來要用於合併到影片裡。
對我來說,我這裡的檔案是B格式第二階AmbiX。
我Load一下聲音檔。
我們開始吧。
接下來,如果我有頭鎖音軌檔案,我可以Load進來,
它是我最終用於上傳的影片的一部份。
最後,我想告訴它我要創建成什麼格式的影片。
我可以加載我相機的原始錄影檔
用完整的解析度。
我已準備好對最終影片進行編碼。
現在我們已做完一遍你工作階段的設定,
將A格式轉換成B格式Ambisonics訊號混音工作階段
並將其空間化,從你的DAW中輸出最終混音,
並將其編碼成最終所需格式的影片
你可以將其上傳到Facebook、YouTube或任何其他觀看格式。
我建議你在向公眾發佈之前,
先用私人瀏覽權限來上傳,
觀看並確認它有得到你想要的結果
並且您所編碼的Ambisonic空間聲場信息
確實照著您期望的情況進入到您的影片中。
我希望你能夠很好地探索每個插件中的各種參數
並製作出一些具有創意的項目。

這個網站採用 Akismet 服務減少垃圾留言。進一步瞭解 Akismet 如何處理網站訪客的留言資料