はじめに

アンリアルエンジンとサウンドミドルウェア「ADX for UE」を連携させてサウンドを再生する際、UEの機能である「マテリアル」からサウンドに影響を与えてみようという試みです。

マテリアルインスタンスのパラメータドリブンでAisacコントロールを行ったり、またその結果によってマテリアルインスタンスのパラメータに変化を及ぼしたりといったリアルタイム処理が可能です。
物理挙動をベースにした衝突音を加味したり、マテリアルをデザインするアーティストによるサウンド設計など面白い挙動が再現できるかもしれません。

この記事では基本的なマスターマテリアルやマテリアルインスタンスの作成と、パラメータの数値を取り出しAtomサウンドに変化を与えるところまでを扱います。

前提

当記事ではUE5.0を使用しています。基本的にブループリントのみでの実装を想定します。
ADXはインディー向けの「LE版」であれば、無料で使用できます。
https://game.criware.jp/products/adx-le/

なお、ADX2は「ADX」へ名称が変更になりましたが、ツール構成は変更ありません（2がないから古いほう、というわけではありません）。

記事執筆時点のADX for UEのSDKバージョンはADX LE UE SDK(1.31.00.01)です。

ADX for UEの導入や基本的な使い方は以下の記事にあります。必要に応じて参照してください。
ADX for UEの導入で、一歩上のサウンド表現を（導入編）

ADX for UEの導入で、一歩上のサウンド表現を（実践編）

実装

マスターマテリアルを作成する

最終的にマテリアルから派生する「マテリアルインスタンス」からパラメータを取得することになりますが、その大元となるマテリアル、「マスターマテリアル」を作ってみることにしましょう。
「マスターマテリアル」は親、「マテリアルインスタンス」は子という認識をするとわかりやすそうです。

コンテンツブラウザで右クリックし、「Material」を作成します。

わかりやすい名前をつけます。

ダブルクリックするとマテリアルエディタが開きます。

「T」キーを押しながら空いている場所をクリックするとTextureSampleノードが作られます。これは指定したテクスチャを取得・表示できるものです。「RGB」から「BaseColor」につなぎます。

左下のDetailsパネルでテクスチャを指定すると、マテリアルの表面に貼り付けられます。

「1」キー（テンキーではない方）を押しながらクリックすると、float型として扱える変数が出現します（一応Constantという名前がついています）。

同じようにTextureSampleと変数を追加しつなげていきます。
次の画像のように構成すれば、ひとまず最低限の機能をもつマスターマテリアルができそうです。
下のTextureSampleでは「Normal」につなげていますので、ノーマルマップを指定します。

ノードを右クリックして「Convert to Parameter」を選択すると……

ノードは「パラメータ」化され、マテリアルの子であるマテリアルインスタンスで画像や数値をカスタマイズできるようになります。さらに、ゲーム内で動的にパラメータを変化させることも可能になります。

4つのノードすべてをパラメータにコンバートします。

Constantノードについては、Detailsパネルでデフォルト値、スライダーの最小値最大値を設定できます。

これでとりあえずの完成です。「Apply」を押して保存します。

マテリアルインスタンスを作成する

マスターマテリアルからマテリアルインスタンスを作成します。

マスターマテリアルの性質を受け継いだ子、マテリアルインスタンスが作られます。
マテリアルに「M_（マテリアル名）」と名前をつけたのに対し、こちらは「MI_（マテリアルインスタンス名）」と名前をつけます。

ダブルクリックして開きます。
マスター側でパラメータ化した数値が表示されていますので、チェックをつけてスライダーを操作するとマテリアルインスタンスの質感が変わっていきます。

パラメータ化したテクスチャについても同様に、チェックを入れることで別の画像を指定して差し替えることができます。

マテリアルインスタンスのパラメータを取得し、衝突音を変化させる

オブジェクト用アクターを作成する

アクターを新規に作成します。
コンテンツブラウザの適当な場所で右クリックし、「Blueprint Class」です。

親クラスは「Actor」を選択します。

ダブルクリックして開き、「StaticMesh」コンポーネントを追加します。

StaticMeshコンポーネントをこのアクターのベースとしたいので、ドラッグして一番上に持っていきます。
「DefaultSceneRoot」コンポーネントに被せるイメージです。

適当にメッシュを指定します。

「Simulate physics」にチェックをつけます。これで物理挙動がシミュレートされるようになります。

衝突時にサウンドを再生する

イベントグラフに移動します。
物理挙動シミュレーションで衝突した時にイベントを発火するには、Set Notify Rigid Body Collisionノードで有効にしてあげる必要があります。

「StaticMesh」コンポーネントを右クリックし、「Add OnComponentHit」を選択。

衝突時のイベントノードが現れます。

今回は「衝突の強さが一定以上か判別し、衝突音を再生する」という方法をとることにしましょう。
「Normal Impulse」のベクター情報をVector Lengthノードに通すことによって大体の衝撃の強さが取得できます。

「Hit」アウトプットピンから線を伸ばし、Break Hit Resultノードで衝突結果から情報を取り出します。

サウンドの再生にはPlay Sound at Locationノードを使用します。同名のノードがありますが、必ず「Atom」カテゴリにあるものを使用してください。
Play Sound at Locationノードで再生するAtomキューを指定します。

次のようにノードをつなげば音が鳴るようになります。

レベルに配置してみましょう。落下時などの強い衝撃でサウンドが再生されるはずです。

パラメータを取得する

マテリアルインスタンスのパラメータを取得・操作するためには「ダイナミックマテリアルインスタンス」を作成・適用する必要があります。これはマテリアルインスタンスのさらにインスタンス（子）になるイメージです。
Event BeginPlayの処理のあとに、Create Dynamic Material Instanceでダイナミックマテリアルインスタンスを作成します。

次の画像のようにつなげば、現在のStaticMeshが持つマテリアル（もしくはマテリアルインスタンス）を元にダイナミックマテリアルインスタンスを作成できます。

青いアウトプットピン「Return Value」を右クリックし「Promote to Variable」で変数化します。

適当に名前をつけます。

最後に、Set MaterialでStaticMeshのマテリアルをダイナミックマテリアルインスタンスで上書きすればOKです。

衝突時に、ダイナミックマテリアルインスタンスのパラメータを見てサウンドに変化を与えます。
AtomキューをAISACコントロールで操作したいので、Play Sound at LocationからSpawn Atom Sound at Locationにノードを差し替えます。

再生が終わったら音源をレベルに残さないよう「Auto Destroy」にチェックがついていることを確認しておきましょう。

ダイナミックマテリアルインスタンスから値を取得するには、Get （型の名前） Parameter Valueノード各種を使用します。パラメータ化したあらゆる値を取得できます。「Parameter Value」にはマテリアルインスタンスが持つパラメータ名を指定します。一致していないと正常に処理が行われませんので、よく確認しておきましょう。
また、このノードは通常のGetノードと異なり白い線をつなぐ必要があります。取得タイミング（ノードが実行されたタイミング）での数値が返される点も留意しておく必要がありそうです。

衝突時にこのオブジェクトが持つマテリアルの「Metalic」を取得します。Get Scalar Parameter ValueはConstantノードが持つFloat型変数を取得できます。

Set Aisac by NameでAISACコントロールに値を渡し変化を与えます。Metalicですので、数値が高いほど重い音（金属音）が響くようにAtomCraftで調整すると良さそうです。

また、「Roughness」の値を取得してさらに変化を与えることもできます。この場合は数値が高いほど乾いた音にするといいかもしれません。

補足

PhysicsMaterialから再生するキューを選択する

マテリアルインスタンスごとにPhysicsMaterialを指定できます。

PhysicsMaterialごと対応したサウンドを再生する方法は以下の記事にまとめてありますので、興味があれば参照してみてください。