はじめに
アンリアルエンジンとサウンドミドルウェア「ADX for UE」を連携させ、パーカッションのないメロディラインに動的にドラムパートを追加する実装のチュートリアルです。
ゲーム内のシチュエーションに合わせてパートを追加するだけでなく、細かな状況に合わせて使用する打楽器を変えてみたり、はたまたユーザーがドラムパターンを作れてしまう、といった活用も可能です。
当記事は過去記事「ADX2 for UE4で、BGMのテンポに合わせた演出を実装する」の実装法を活用して別アプローチをするものですが、この記事だけでも実装が可能かと思います。
前提
当記事ではUE5.0を使用しています。基本的にブループリントのみでの実装を想定します。
ADXはインディー向けの「LE版」であれば、無料で使用できます。
https://game.criware.jp/products/adx-le/
なお、ADX2は「ADX」へ名称が変更になりましたが、ツール構成は変更ありません（2がないから古いほう、というわけではありません）。
記事執筆時点のADX for UEのSDKバージョンはADX LE UE SDK(1.31.00.01)です。
ADX for UEの導入や基本的な使い方は以下の記事にあります。必要に応じて参照してください。
ADX for UEの導入で、一歩上のサウンド表現を（導入編）
ADX for UEの導入で、一歩上のサウンド表現を（実践編）
実装
AtomCraftでサウンドを構成する
まずはサウンドオーサリングツール「AtomCraft」で、実装に使用するためのメロディとパーカッションを構成していきます。
マテリアルの用意
プロジェクトを作成し、マテリアル（音源ファイル）をインポートします。
画像では分かりやすいようサブフォルダにメロディとドラムを分別しています。
メロディパートについては、インスペクターにてループ情報の上書きを「True」、ループタイプを「ループ」にしループ再生されるよう設定します。
メロディ用キューの作成
新規にキューを作成します。
キューシートを右クリックし「新規オブジェクト」→「キュー『ポリフォニック』の作成」です。
作成したキューへ、メロディとなるマテリアルをひとつだけ配置します。
メロディのビートタイミングを取得できるようマーカーを作成します。
トラックリストの空欄で右クリックし、「新規オブジェクト」→「ビート同期情報の作成」を選択します。
BeatSyncマーカーが作られました。
マーカーをクリックして選択しておき、インスペクターにてメロディのBPMを入力します。
今回は仮に2小節分のドラムパターンを演奏すると仮定し、分子を「8」と設定します。
インスペクターの「BeatSync」にてビートパターンをいじれたりするのですが、ここはUEで同じようなことをやっていくので触らずに置いておきます。
同じようにメロディひとつにつきひとつのキューを構成します。
ドラム用キューの作成
ドラム用にも同じく「ポリフォニック」のキューを作成します。
こちらもキック、ハイハット、スネアなどのキューを作成し対応するマテリアルを入れていきます。
ちょっとした余談ですが、キューのタイプを「ランダム」にするとひとつの打楽器からランダムな音を鳴らすことができます。少し変わった演出にも使えそうですし、微妙に異なるパターンのマテリアルをランダムで鳴らすことで「マシンガン効果」の軽減にも役立ちます。
（この例ではキック、ハイハット2種、スネアが再生のたびにランダムに鳴ります）
キューシートのビルド
ここまでできたらキューシートをビルドします。
UEでの実装
ここからはUE5を起動して実装していきます。
キューシートのインポート、サウンド確認
ビルドしたキューシートをインポートします。
生成されたacf、acbファイルをUEのコンテンツブラウザにドラッグアンドドロップするとインポートメニューが表示されます。
基本的にはそのままでOKです。
インポートしたキューがコンテンツブラウザに表示されました。
プロジェクト設定を開きます。
CriWareタブ内、「AtomConfig」でビルドしたacfファイルを指定します。
音声が再生されるかテストしてみましょう。
レベル上にメロディ用キューをドラッグアンドドロップします。
ゲームを再生します。メロディが単体で再生され、ループするようになっているでしょうか？
確認が終わったら配置したキューを削除するか、「Auto Activate」のチェックを外して自動的に再生されないようにします。
BGM再生用のキューを作成する
メロディとドラムパートを再生するための専用のブループリントを作っていきましょう。
コンテンツブラウザの適当な場所で右クリックし、「Blueprint Class」を選択して新しいアクターを作成します。
親クラスは「Actor」です。
作成できたらダブルクリックして開き、「Atom Component」を追加します。
追加したコンポーネントを選択し、Detailsパネルにて初期値となるサウンドを指定しておきます。
うっかりサウンドを指定し忘れたときにエラーが出るのを防ぐためです。
レベル上でサウンドを指定できるようにするため、Construction Scriptに移動します。
タブをクリックして切り替えます。
コンポーネントをGetし、Set Soundノードでサウンドを指定します。再生するサウンドは変数から指定するので、空欄にしておきます。
SetSoundノードのアウトプットピン「New Sound」を右クリックして「Promote to Variable」で変数化します。
新しく変数が作られます。「MelodySound」とでも名前をつけておきましょう。
My Blueprintパネルにて、作成された変数の目のボタンを押し外部からアクセス可能にしておきます。
アクターをレベルに配置すると、Detailパネルから「Melody Sound」が指定できるようになりました。
bpmに合わせてドラムを鳴らす
静かなメロディにドラムパートを動的に追加していきます。
コンポーネントをGetし、
線を引き出してAssign On Beat Sync Callbackを選択します。
ノードとイベントノードが配置されました。
これらはそれぞれ「bpmのタイミングに合わせてイベントを呼び出す」ノードと「呼び出される」イベントノードになります。
線をつなぎ、分かりやすい位置に並べ直します。
ドラムを鳴らすため、Spawn Atom Sound 2Dノードを置きます。「Sound」にはキック音を指定します。
Spawn Atom Sound 2Dノードは「Params」ピンに再生情報が必要なので、線を引き出しMake AtomComponentParamsを配置します。
ゲームを再生してみましょう。メロディのテンポに合わせてキック音が再生されているのが分かるでしょうか？
裏拍を追加する
キックを鳴らすのと平行して、裏拍にハイハットの音を鳴らしリズム感を追加していきます。
まずはイベントノードの「Beat Sync Info」アウトプットピンからビートの同期情報を取り出します。
線を引き出し、Break Atom Beat Sync Infoノードを作ります。
現在何拍目か、bpmなどの情報が取得できます。
ビートタイミングから裏拍までの時間は60÷bpm÷2で求めることができます。
Delayノードで裏拍までの時間を待機し、ふたたびSpawn Atom Sound 2Dノードを使いハイハットを鳴らします。
任意で再生を開始する
現状ではゲームの再生と同時にメロディの再生が開始されますが、これを任意のタイミングで開始できるようにしてみましょう。
アクター内のAtomコンポーネントを選択し、Detailsパネルで「Auto Activate」のチェックを外します。
これでAtomコンポーネントのメロディキューが自動的に再生されなくなりました。
カスタムイベントを作成し、コンポーネントをPlayノードを使って再生します。
Bind Event to On Atom Beat Sync Callbackを使ってのビートタイミングとイベントの紐づけは、メロディの再生開始時に行われるようつなぎ直します。
レベル上でこのアクターを選択しておき、レベルブループリントを開きます。
イベントグラフの空欄で「Create a Reference to （アクター名）」を選択し、リファレンスノードを作ります。
Input Key 1イベントからカスタムイベントを呼び出せば、キー入力により再生が開始されます。
これで基本的な動的ドラムが実装できました！
効果的なタイミングでドラムパートを徐々に追加していく、変化していくなどの演出を使いゲームを盛り上げてみましょう！
この記事をベースに、ドラムパターンをプログラムしたり打楽器の差し替えを行う実装についての記事を公開しました。
より柔軟なインタラクティブ要素が追加できるようになるかと思いますので、よろしければ参照してみてください。