1。基本を理解する:
* 空間オーディオエンコード: このプロセスには、方向情報(PAN、TILT、ロール)でオーディオをキャプチャまたは生成することが含まれます。 これにより、オーディオプレーヤー(VRヘッドセット、YouTubeなど)は、視聴者のヘッド位置に対して3Dスペースの正しい場所からサウンドを再現できます。 一般的な形式は次のとおりです。
* Ambisonics(例えば、一次アンビゾおり-FOA、高次のアンビソン - HOA): 四面体マイクアレイを使用して、あらゆる方向から音をキャプチャします。 非常に柔軟で広くサポートされていますが、多くの場合、特定のプラットフォームにデコードが必要です。
* バイノーラルオーディオ(HRTFベース): 頭、耳、胴体の形を考慮して、人間の耳によって音が聞こえる方法をシミュレートします。これは、多くの場合、ヘッド関連の転送関数(HRTF)によって達成されます。 ヘッドフォンには効果的ですが、スピーカーではそうではありません。
* チャネルベースのシステム(例:5.1、7.1): 複数のスピーカーにサウンドを配布します。 3Dスペースに注意深くマッピングしない限り、360ビデオには理想的ではありません。
* ヘッドトラッキング: 視聴者の頭の動きは追跡されます。この情報は、空間オーディオ再生を調整するために使用され、視聴者の向きに比べてサウンドソースが正しい位置に残ることを保証します。 これは、本当に没入感のある体験に不可欠です。
2。空間オーディオの記録:
* アンビソニックマイク: これらのマイクは、空間オーディオをキャプチャするように特別に設計されています。 一般的なオプションには次のものがあります。
*ズームH3-VR:比較的手頃な価格で使いやすいオプション。
* Sennheiser Ambeo VR Mic:その高い忠実度で知られるプロのグレードのマイク。
* Rode NT-SF1:正確な空間イメージングで知られるもう1つのプロのグレードオプション。
* バイノーラルマイク/ダミーヘッドレコーディング: バイノーラルマイク(ダミーの頭に埋め込まれていることが多い)を使用すると、頭と耳の効果を含む人が自然に聞こえるように音が撮影されます。 これは、ヘッドフォンベースの体験に最適です。
* 複数のモノマイク: また、シーンの周りに複数の個々のマイクが配置されたもので音を記録することも可能です(より複雑ですが)。 これらの録音は、ポストプロダクションで処理され、空間オーディオを作成します。 これには、慎重な計画と専門知識が必要です。
3。ポストプロダクションと空間オーディオエンコーディング:
* 空間オーディオワークステーション(DAWS): 空間オーディオプラグインとワークフローをサポートするDAW(デジタルオーディオワークステーション)が必要です。 一般的な選択肢は次のとおりです。
* reaper: 手頃な価格で高度にカスタマイズ可能で、アンビゾおりに優れたサポート。
* ロジックプロX: AppleのプロのDAWは、統合された空間オーディオツールを提供しています。
* Proツール: 業界標準ですが、より高価です。 空間オーディオには特定のプラグインが必要です。
* nuendo: SteinbergのDAWは、ポストプロダクションと空間オーディオ用に特別に設計されています。
* 空間オーディオプラグイン: これらのプラグインは、3Dスペースでサウンドをパン、配置、操作するのに役立ちます。例は次のとおりです。
* Facebook 360空間ワークステーション: FacebookおよびOculusプラットフォーム用の空間オーディオを作成およびプレビューできる無料のプラグインスイート。
* dearvr pro: さまざまな仮想音響環境をシミュレートするプロフェッショナルグレードのプラグイン。
* Waves nx仮想ミックスルーム: ヘッドフォンでミキシングするためのハイエンドのスタジオリスニング環境をシミュレートします。
* ノイズメーカーAmbi Pan: 多用途のアンビソニックパンプラグイン。
* Oculus Spatializerプラグイン: Oculusの空間オーディオを作成するためのもう1つの優れたオプション。
* 正しい形式へのエンコード: 空間オーディオを混合してマスターした後、ターゲットプラットフォーム(YouTube、Oculus、VRアプリなど)に適切な形式(Ambisonicsなど)にエンコードする必要があります。通常、DAWまたは空間オーディオプラグインはこれを処理します。
4。オーディオとビデオの統合:
* 同期: オーディオとビデオの間の正確な同期が重要です。 タイムコードまたはその他の同期方法を使用して、サウンドイベントが視覚イベントと完全に整合するようにします。
* 視覚キューに基づく空間化: 混合するときは、ビデオ内のオブジェクトやイベントの場所に細心の注意を払ってください。たとえば、ビデオの視聴者の左側にキャラクターが話している場合、オーディオも左から発生するように空間化する必要があります。
* 距離モデリング: リバーブやその他の効果を使用して、音源の距離をシミュレートします。遠く離れた音は静かになり、リバーブが増えているはずです。
5。さまざまなプラットフォームの最適化:
* YouTube 360: YouTubeは、ファーストオーダーアンビソニック(FOA)の形で空間オーディオをサポートしています。 正しい空間オーディオメタデータを使用してビデオをアップロードすると、YouTubeが空間化を処理します。 彼らはこれを行う方法に関するドキュメントを持っています。
* oculus/vrアプリ: 通常、プラットフォーム(Oculus Audio SDK、Steam Audioなど)が提供する特定の空間オーディオSDK(ソフトウェア開発キット)を使用して、空間オーディオをVRアプリケーションに統合する必要があります。
* モバイルVR: モバイルVRデバイスの制限を考慮してください。 処理能力は限られているため、パフォーマンスを維持するために空間オーディオセットアップを簡素化する必要がある場合があります。
6。没入型空間オーディオを作成するためのヒント:
* 先の計画: 録音を開始する前に、シーンのサウンドスケープについて考えてください。 主要なサウンドソースと、それらが3Dスペースでどのように移動するかを特定します。
* 自然な音を使用: 可能な限り、自然な現実世界の音を使用してみてください。 これは、より信頼できる没入感のある体験を作成するのに役立ちます。
* 閉塞と反射を考慮してください: 音波がオブジェクトによってどのようにブロックされ、シーン内の表面から反射されるかを考えてください。 空間オーディオ効果を使用して、これらの現象をシミュレートします。
* より少ないもの: サウンドスケープをあまりにも多くの音で混雑しないでください。 最も重要な音に焦点を当て、それらが明確で明確であることを確認してください。
* 徹底的にテスト: さまざまなデバイスとプラットフォームで空間オーディオをテストして、すべての環境で良好に聞こえるようにします。
* 編集中にヘッドフォンの監視を使用: 混合中は、よく知っている高品質のヘッドフォンを使用してください。これにより、空間オーディオミックスを正確に評価するのに役立ちます。
* サウンドデザインの原則を考慮してください: サウンドエフェクトと音楽を使用して、ビデオの感情的な影響を高めます。音を重ねて、より複雑で興味深いサウンドスケープを作成することを検討してください。
* 明確さと精度に優先順位を付ける: 空間オーディオが明確で正確であることを確認してください。サウンドは3Dスペースに正しく配置する必要があり、ビデオの視覚的要素で現実的に移動する必要があります。
* さまざまなテクニックの実験: さまざまな空間オーディオテクニックを試して、プロジェクトに最適なものを見つけることを恐れないでください。
* オーディオ専門家に相談: 空間的なオーディオ制作に慣れていない場合は、プロのサウンドデザイナーまたはオーディオエンジニアを雇うことを検討してください。
要約:
球形ビデオ用の説得力のある空間オーディオを作成するには、慎重な計画、記録技術、ポストプロダクションスキル、プラットフォーム固有の最適化が必要です。これらのガイドラインに従うことで、視聴者を別の世界に輸送する真に没入感のある体験を作成できます。空間オーディオミックスを改良し、目的の効果を実現するために、テストして反復することを忘れないでください。幸運を!