Ambisonics 用 3D ミックス

Nuendo では、バーチャルリアリティー (VR) または拡張現実 (AR) の制作のために、Ambisonics 形式の 3D ミックスを作成できます。空間的ミキシングまたはヘッドトラッキングモニタリング用の統合機能およびプラグインを使用するか、サードパーティー製の専用 VST プラグインを使用できます。

Ambisonics は、球状のサウンドフィールドを作り出すテクノロジーです。従来のイマーシブサウンド形式とは異なり、チャンネルベースの 3D ミキシングとも異なった、複数のオーディオ信号から成るエンコードバンドルを使用することで、音源を Ambisonics 内のどこにでも配置できます。

Nuendo は 1st (一次)、2nd (二次)、3rd (三次) の各 Order の Ambisonics に対応しています。これらの形式は、使用されるオーディオ信号の数が異なります。次数が上がるほど (=Higher Order) 信号の数が増え、音の定位の精度が上がります。

Ambisonics を再生するには、Ambisonics 形式の信号をデコードする必要があります。Ambisonics は以下の方法で再生できます。

  • ヘッドフォンとバイノーラルデコーディングを使用

    適切に整合した頭部伝達関数 (HRTF) 構成を使用すると、360° の完全な球状のリアルなサウンドフィールドが作り出されます。ヘッドトラッキングテクノロジーを利用し、聞き手の頭部の動きを反映したバイノーラルエンコーディングを行なうことで、よりリアルなサウンドを再現できます。

  • 3D マルチチャンネルのスピーカーセットアップを使用

    スピーカーセットアップが球状に近づくほど音の定位の精度が上がります。ただし、Ambisonics は 5.1.4 チャンネル構成などに投影できます。

Nuendo で Ambisonics オーディオを扱う場合、以下のルールが適用されます。

  • Ambisonics オーディオを録音するには Ambisonics 対応のマイクシステムが必要です。

  • あらかじめ作成された wav 形式の Ambisonics ファイルを読み込めます。

  • Ambisonics として配置したオーディオイベントは、プロジェクトウィンドウ、サンプルエディター「ダイレクトオフラインプロセシング (Direct Offline Processing)」ウィンドウなどで他のオーディオと同じように編集できます。ただし 1 つの Ambisonics ファイルの信号は、すべてのチャンネルを同時に編集する必要があります。

    補足

    すべての編集操作が Ambisonics オーディオに適しているわけではありません。たとえば、オーディオ信号の位相やレベルにチャンネル間同士で差が出るような操作は避けてください。

  • 「VST MultiPanner」を使用して、モノラル、ステレオ、またはマルチチャンネルのソースから Ambisonics ミックスを作成できます。「VST MultiPanner」を Ambisonics モードで使用するには、出力バスで Ambisonics 形式を「Main Mix」に設定する必要があります。

  • VST AmbiDecoder は、ヘッドフォンまたはラウドスピーカーシステムでのモニタリング用に Ambisonics オーディオをデコードします。「Phones」チャンネル経由でモニタリングするときは、バイノーラル方式の再生音に Ambisonics オーディオが自動的にデコードされます。

  • Nuendo はヘッドマウントディスプレイや 3D マウスデバイスなどの外部 VR コントローラーデバイスからのトラッキングデータを使用して、試聴方向を変更できます。これにより、360° ミックスのリアルなモニタリングが行なえます。

    頭の動きに影響されてはならないバックグラウンドミュージックのトラックについては、サイドチェーン経由でヘッドトラッキングデータが固定された音声信号を送信することでトラッキングをバイパスできます。

  • Nuendo では AmbiX 形式のみがサポートされます。VST AmbiConverter を使用すると、Furse-Malham (FuMa) 形式と AmbiX 形式間で変換できます。

  • ミキシング、変換、ヘッドトラッキング、またはバイノーラル化には、サードパーティ製の専用 Ambisonics プラグインも使用できます。

    補足
    • Insert プラグインにしか適さない Ambisonics パンナーを使用する場合は、たとえモノラルオーディオまたはステレオオーディオしか含まれていなくても、ミックス内のすべてのオーディオチャンネルが Ambisonics 形式である必要があります。

    • サードパーティー製プラグインの使用方法については、同プラグインに付属するマニュアルを参照してください。

  • Ambisonics オーディオを再生できるようにプロジェクトが設定されていれば、MediaBayプール「ダイレクトオフラインプロセシング (Direct Offline Processing)」ウィンドウ、またはファイル読み込みダイアログで Ambisonics オーディオを試聴できます。