UE5.1のHDR

　UEのHDR対応については以前記事にしました。
UE4のHDR対応はどうなってるの？Win10編
 UE4のHDR対応その後

　その後、お仕事でもHDR対応ゲームをリリースし、まあまあHDRに関する知識も増えたのですが、それでもやはり難しいです。基礎からちゃんと勉強しないとなあと思っている次第です。

エディタでのHDR

　さて、UE5.1ではエディタ上でHDR作業ができるようになるという話を関係者から伺っていたので、ざっと調査してみました。
　GitHubから取得したUnrealEngineをビルドして、Third Person Shootingテンプレートでエディタを起動しました。
　まずはHDRが有効になっているかを確認します。

　デフォルトでは無効なようです。
　DefaultEngine.iniで有効化します。

DefaultEngine.ini

[/Script/Engine.RendererSettings]
r.RayTracing=True
r.AllowHDR=1

　エディタを再起動して、コマンドプロンプトからHDRへ切り替えてみます。

　なんだかWarningが出てますが、HDR有効になったようです。
　UE4ではエディタのUIの色がおかしくなったりしていましたが、問題ないみたいです。

　OutputDeviceを確認します。

　OutputDeviceは5になっています。これは以前の記事でも触れましたが、OutputDeviceは以下のように定義されています。

TonemapCommon.ush

/** Values of DIM_OUTPUT_DEVICE (matching C++'s EDisplayOutputFormat) */
#define TONEMAPPER_OUTPUT_sRGB 0
#define TONEMAPPER_OUTPUT_Rec709 1
#define TONEMAPPER_OUTPUT_ExplicitGammaMapping 2
#define TONEMAPPER_OUTPUT_ACES1000nitST2084 3
#define TONEMAPPER_OUTPUT_ACES2000nitST2084 4
#define TONEMAPPER_OUTPUT_ACES1000nitScRGB 5
#define TONEMAPPER_OUTPUT_ACES2000nitScRGB 6
#define TONEMAPPER_OUTPUT_LinearEXR 7
#define TONEMAPPER_OUTPUT_NoToneCurve 8
#define TONEMAPPER_OUTPUT_WithToneCurve 9

　ACES1000nitScRGBが設定されています。
　scRGBというのは、今まで一般に使用されてきたsRGBよりもかなり色域が広い色空間です。最大輝度1000nitのScRGBで出力されているようです。

HDR時のUI描画

　まずはエディタ上でもHDRで描画されているらしいことを確認しました。UI描画はどうなってるでしょうか。

　UE4のHDR描画ではUIの描画にいろいろ問題がありました。それについてはUNREAL FEST WEST'22の講演で触れているので御覧ください。

　CompoisteModeは1ですね。つまりUIは出力画面に直接描画されず、別バッファにすべて描画したあとに出力画面に合成されるモードです。
　UE4ではこのモードではUIのブレンドでBackground BlurやAddtiveやModulateが使用できませんでしたが、UE5.1ではどうでしょう。こんなUI Widgetを組んでみました。上からTranslucent, Modulate, Addtive, Background Blurを配置しています。

　これをゲーム画面に描画するとこうなりました。

　HDRでキャプチャしたものを画像にすると実際の見た目と同じにはならないですが、おおよその感触は伝わるかと思います。
　Modulateは描画されず、AddtiveはTranslucentと同じみたいです。Background Blurはちゃんと描画されています。テキストの上からブラーがかかっているので、UE4で改造しても最後面にしか描画されなかった問題も解消されているみたいです。キャプチャ画像では潰れてますが、実際の画面ではちゃんと表示されていました。

　SDRではこうなってます。

　RenderDocで描画の過程を見ると面白いですね。エディタUIも含めてあらゆるUIをバッファに描画しています。

　そして、その結果をView画面と合成して最終的な画面出力にしています。

UIの明るさ

　HDR状態ではUIの明るさを変更するコマンドがあります。

r.HDR.UI.Level

　これでView画面とは独立してUIの明るさを変更できますが、エディタ上ではView画面のUIもエディタUIもまとめて明るさが変わります。View画面との合成時にUIターゲットの明るさを調整しているので、ゲームUIとエディタUIを別々に調整はできません。
　また、UE4にはなかった

r.HDR.UI.Luminance

　というコンソール変数が追加されています。こちらでもUI全体の明るさを調整できます。

static TAutoConsoleVariable<float> CVarHDRUILuminance(
	TEXT("r.HDR.UI.Luminance"),
	300.0f,
	TEXT("Base Luminance in nits for UI elements when compositing into HDR framebuffer. Gets multiplied by r.HDR.UI.Level"),
	ECVF_RenderThreadSafe);

　UIの輝度をnitで調整するみたいですね。r.HDR.UI.Levelはこれに乗算するみたいなので、UE5.1からはr.HDR.UI.Luminanceでベースの輝度を設定して、Levelで調整が良いのかなと思います。デフォルトが300になっていますが、一般的なSDRディスプレイの明るさが300nitくらいと言われているのでそれにあわせた数値でしょうか？

　ということで、エディタ上でHDR描画は機能しているみたいです。ただし、やはりフィルミックトーンマップはHDRでは無効みたいで変更しても画面に変化はありませんでした。

HDR関連の拡張

　コンソールコマンドからr.hdrと入力するとHDR関連のコンソール変数が表示されます。

　いろいろ増えてますね。とくに r.HDR.Aces.SceneColorMultiplier でHDR描画の明るさの調整ができたり、 r.HDR.Display.MinLuminanceLog10, r.HDR.Display.MidLuminance, r.HDR.DIsplay.MaxLuminanceでディスプレイにあわせたコントラスト調整ができるようになっているのはとてもありがたいです。UE5.1からは実用的なHDRの明るさ調整ができるようになりそうです。MinLuminanceだけLog10が付いているのは0に極めて近い小さな数字を指定できるようにしているのだと思います。デフォルトが-4なので実際の値は0.0001ということかなと。
　なんといっても一番大きいのは、これらのパラメーターがエディタ画面上で調整できるということです。UE4時代はゲームビルドを作成して実行しないと実際のHDR描画を確認することができなかったので。
　UE5.1からはエディタ上でアーティストがライティングやエフェクトなどをリアルタイムに確認しながら作業できる時代になりそうです。　

　追加されたコンソール変数にこんなものも。

static TAutoConsoleVariable<int32> CVarEditorHDRSupport(
	TEXT("Editor.HDRSupport"),
	0,
	TEXT("Sets whether or not we should allow the editor to run on HDR monitors"),
	ECVF_Default);

static TAutoConsoleVariable<float> CVarEditorHDRNITLevel(
	TEXT("Editor.HDRNITLevel"),
	160.0f,
	TEXT("Sets The desired NIT level of the editor when running on HDR"),
	ECVF_Default);

　これらはエディタの環境設定のここからも設定できます。

　ただし、Editor.HDRSupportはWindowsD3D11Viewport.cppからしか参照されていないので、D3D11限定の設定のようですし、Editor.HDRNITLevelも変更しても変化は無いし。D3D11で起動すると変わるのかもしれませんが、筆者はD3D12でしか起動しないので深追いしません。気になる人は調べてみてください。

ビルドでのHDR

　ビルドでのHDRとエディタでのHDRは出力デバイスが違うので注意が必要です。このへんの話は以前の記事にも書きましたが、ビルドでのOutputDeviceは3、つまりACES1000nitST2084です。これは最大輝度が1000nitで色空間はST2084、Dolby-PQカーブなのでエディタとはバッファ上の数値が異なります。RGBのビット数も3は10bitに対して5は16bitです。最終的にディスプレイに出力されるとほとんど同じ結果になるはずですが、ポストプロセスマテリアルでAfterTonemappingで描画すると、ポストプロセスの描画対象がscRGBかST2084かで結果が全く違うので注意が必要です。HDR対応するならAfterTonemappingは使用しないのが無難です。

まとめ

　さて、UE5.1のHDR対応をさらっと確認しました。ポイントとしては

エディタでもHDR表示が可能になり、エディタUIが色バケしたりもしなくなった。
UIのブレンドモードはUE4同様制限あり。Background Blurは使える。
HDRの明るさ調整機能が充実した。

　といったところです。UE4よりも格段にHDRでの調整がしやすくなりました。

　参考までにミーアキャットデモをエディタ上でHDR表示にしたものをiPhoneで撮影したもの。

　って、伝わらないですね。HDRをSDRで説明する難しさは相変わらずです。