はじめに
ゲーム中におけるプレイヤーの操作シーンとカットシーンをシームレスに切り替える状況を想定した際、視点とサウンドの聴取位置のギャップによる違和感が生じることがあります。
この記事では、そんなシチュエーションにおける解決策を、簡単な実装法を絡めて紹介します。
UE5.4 + 基本的にブループリントを使用しています。他バージョンでも基本的に同様の実装が可能です。
リアリティと演出のギャップ
3D空間上に配置されたサウンドは、距離による減衰でカメラの距離に応じたボリュームで再生されています。
前半はカメラが近く、いい感じに効果音が聞こえるのに対し、後半ではカメラが遠ざかり、爆発音などはほぼ聞こえません。サウンドはTPS視点でデザインされているため、そのまま俯瞰視点に移行した場合過度な減衰がかかってしまっていますね。
現実世界ならこれは正しい挙動なのですが、ゲームや映像という媒体ならばリアリティよりも臨場感を重視したいものです。
この解決には、主に2つの方法があります。
- シーケンサー上にサウンド再生用のトラックを作り、減衰のないサウンドを再生する
- サウンドの聴取位置をカメラと分離して設定する
前者がサウンドの減衰や定位を全く無視してしまうのに対し、後者では減衰や定位を活かしつつ、サウンドとの丁度良い距離感を探ることができるお得な実装法となっています。
Audio Listenerを手動で設定する
次の画像は通常の（現実世界と同様の）イメージです。
これに対し、Audio Listenerを手動で設定すると、現実世界とは違い、目と耳が分離できることになります。
Audio Listenerを設定するには、Set Audio Listener Overrideノードを使用します。
「Attach to Component」ピンへコンポーネントを指定すると、以後そのコンポーネントにリスナーが追従することになります。
「Location」「Rotation」ピンでは、都度リスナーの位置や方向を指定できます。
上書きしたリスナー座標を元に戻したい場合は、Clear Audio Listener Overrideノードが使用できます。
これにより、サウンドの聴取位置をプレイヤーと近い位置に手動で設定した例がこちらです。
カメラが俯瞰視点になって離れても、リスナーの位置は変わらず臨場感のあるサウンドを聞くことができます。
リスナーをどの位置に置くのが適切か？
この例ではTargetPointアクターをキャラクターの近くに配置し、その座標をリスナーの座標としています。
これにより、聴取位置はカメラの位置にかかわらず一定となっています。
では、通常のゲームシーンでもリスナーの位置を変更するとどうなるでしょうか？
カメラとプレイヤーキャラクターの位置を取得し、その間の座標にリスナーを置くことで、「キャラクターの聞いている音」をプレイヤーにも届ける事が可能になります。
次の画像では、緑色の円では神視点（プレイヤー）寄り、赤い円ではキャラクター体験寄りとなります。
どちらが体験として適しているかはゲームやプレイヤーによるところが大きいです。
ゲームによってはこの2点間のどちらにリスナーを置くかをコンフィグで設定できるものもあります。
俯瞰視点で進行するゲームにおいては、
- リスナー座標（Location）はプレイヤーに寄せる
- リスナー方向（Rotation）はカメラ方向で固定
といったように、LocationとRotationを別々に設定することで臨場感を残しつつ、効果音の定位により「どこで何が起こっているか」を情報として届けることが可能になります。
また、サウンド減衰を強めにしてもプレイヤーの発するサウンドだけは大きめに（減衰を弱めに）しても良いかもしれません。
プレイヤーキャラクターの発する音は操作のフィードバックとして重要な情報なので、優先的にサウンドが聞こえるようにすることで、操作感がアップします。
ゲームの視点や演出の意図に合わせたリスナー設定を行い、効果的な体験を作ってみましょう。
カットシーンでプレイヤーとカメラが分離する場合
次は、こちらの例を見てみましょう。
カメラがプレイヤーキャラクターから離れて通路を進んでいくと、敵らしきキャラが奥へと進んでいく様が見えます。 しかし、サウンドがパッとしません。 リスナーはプレイヤー寄りになっていますが、カットシーンのカメラがプレイヤーから離れる場合、遠いところでのシーンでは聞かせたいサウンドが全く聞こえなくなってしまっているためです。これを改善するため、カットシーン開始に合わせてリスナーの位置を変更してみましょう。
吹雪の音が遠ざかり、敵キャラの発する音が明確に聞こえるようになりました。こういった演出をデザインしたい場合、カットシーン開始時、終了時にリスナーをプレイヤーから分離する処理を入れることが重要になります。
簡単な方法としては、Lerpノードを使用しプレイヤー座標からカットシーンのカメラ座標に徐々に近づける、というものがあります。
この例では「CameraAlpha」変数を0～1で変動させれば、離れていくカットシーンカメラにリスナーが移行していく形になります。
カットシーンが終了し、プレイヤーキャラクターの視点に戻る際も「CameraAlpha」を1～0で変動させればシームレスに戻ります。
変数はタイムラインやFInterpToノードを使い、滑らかに変化させるとベターです。
視野角による距離ギャップ
極端なシチュエーションですが、このような例も見ていきましょう。
カメラがプレイヤーから離れ、遠くにいる敵をズームし、爆発を起こす様子をとらえます。
ズームし、敵の姿を間近にとらえているにもかかわらず、アクションのサウンドが小さく、BGMや吹雪の音に負けてしまっています。
これは、ズームをする（視野角を下げる）ことにより起きる現象です。
視野角を下げると遠くのものが近くに見えますが、実際にカメラが近づいているわけではないため、サウンドが遠く感じてしまいます。
もともとの視野角が低かったところに、視野角を過度に上げた際も反対の現象が起きることがあります。
この現象には、カメラの視野角を取得し、カメラ方向に向かってリスナー座標の補正をかけてあげるとかなりいい感じになります。
カメラからリスナーを射出するイメージです。
この処理は、次のようなノードで実装できます。
実装後のデモを見てみましょう。吹雪の音を殺さず、爆発の効果音も聞こえるようになりました。
一連の動作におけるリスナー位置を視覚化してみました。視野角が下がるにつれ、リスナー位置に補正がかかり、射出されていく様子がよく分かるかと思います。
視点やカットシーンにおけるサウンドはさりげない部分ですが、プレイヤー体験にかなり直結する要素でもあります。カメラ、リスナーといった方向からアプローチするサウンドデザインも考慮してみるといいかもしれません。