Unity 2018.1にアップデートしたので、フォトグラメトリのFontainebleauデモを眺めてみる

ちょうどキリが良かったので、使用している Unity 2017.4.0f1 から、Unity 2018.1.0f2 にアップグレードしました。

なので Unity 2018.1 リリース のブログを眺めていたのですが、そこで紹介されていた Unity におけるフォトグラメトリ ― 現実世界のオブジェクトをデジタルアセットに が面白そうなので、ちょっと試してみました。

映像で観る

上記のページにも映像はありますが、以下の YouTube 動画のほうが良いとおもいます。画質をHDモードにして、全画面で鑑賞してみてください。なかなか綺麗ですよね。

• Fontainebleau - Photogrammetry assets for games using material layering

デモで体感する

Windows 64bit 環境の方は 説明 ページにある「事前ビルド済のスタンドアロンプレイヤー」をダウンロードして試すのがお勧めです。

サイズは948MBあります。zipファイルを解凍して Fontainebleau44.exe ファイルを実行すればok。

デモ版は Cinematic / First person / Third person の3種類のモードが選べます。

Cinematic は先ほどのYouTube映像と同じものです。ただし、ここで選択した表示モード(夜間とか)が他の2つのモードにも影響するようです。なので、まずはこのモードを試し、一番好みの状態にしておくのが良いでしょう。

Unityでプロジェクトを開く

説明 ページからUnity用のプロジェクトもダウンロードできます。

zipで固めた状態で5.72GBあり、解凍すると13GBを超えるので、ちょっと覚悟が必要です。zipを解凍してできたフォルダをUnityから開くと、以下のような警告が表示され、

この変換で30分ぐらい待たされました…

SSDで作業したのですが、ウチのPCだとCPUがネックになっている模様。Intel Core i7-4790 なんですがそろそろ限界かなぁ… プロジェクト読み込み直後のメモリ使用量は1.6GBぐらい。

この時間のかかるのは最初の一回(あと再インポート)だけのようなので、まあ、気長に待つしかなさそうですね。

Unityでプロジェクトを実行する

プロジェクトを開いた直後はシーンが設定されていないので、メニューから「Load Levels -> Loader」を実効します。

すると以下のようなロード用のシーンが設定されます。

ここでプロジェクトを「Play」で実行すると、動的にいくつかのシーンが読み込まれ、デモが再生されます。

なおこの読み込まれるシーンですが、表示内容によって違います。Cinematicモードで一番左のアイコンを選択し、日中モードにすると以下ですが、

二番目の日暮れモードを選択すると以下に置き換わります。

何が置き換わっているのか

元のページの説明には「ステージは Fontainebleau の森を再現したもので、限られた一式のメッシュとテクスチャ―のみを用いて、LayeredLit シェーダーによってそれらを異なるバリエーションで再利用しています。」とあり、また「このデモでは 3 種類の異なるライティング条件を適用できるようになっており」とあります。

なのでこのように置き換わっているシーンは、シェーダーのバリエーションや、ライティング関連であることが想像できます。

実際、Demo_LI_Day シーンは以下の要素を含んでおり、光源や画面処理に関して設定しているようです。LI は Lighting の略だと思われます。

また Demo_SD_Day シーンは以下の要素を含んでおり、音関係を設定しているようです。SD は Sound の略だと思われます。

そして共通して読み込まれている Demo_GR シーンが実際のモデルのようですね。

いろんな要素の Prefab があって興味深いです。例えば岩をみてみると、5段階のLOD(Level of Detail)モデルが用意されていたり。

また1つの岩モデルに対してマテリアル/テクスチャなどが複数用意されているあたり、LayeredLit シェーダーとやらが生かされてそうです。もう少し勉強しないと、詳細はわかりませんが…

FPSとTPSモードに関して

このデモではCinematicモードの他に、一人称視点(FPS)と、三人称視点(TPS)のモードがあります。ちなみに私は酔いやすいので、自キャラが表示されるTPSモードのほうが好みです。

でもFPSモードだと、要所で解説が出たりするんですよね。

で、これらのモードに切り替えても、シーンの構成は変化しないようです。

で、探してみますと、Video_Timeline シーンで定義されていました。

画面に表示されていたオッサンはChal (Challenger)という名前？だったようです。

オッサンを変えたい

オッサンだと華がないので、例のUnity-chanアセットを追加して、置き換えてしまおうか！と邪念が芽生えたわけですが…。残念ながら Prefab の段階で既にちゃんと表示されません。当然、シーンに追加しても駄目です。

他のプロジェクトでは表示に問題ない？気がするので、Unity 2018.1 固有の問題ではなさそうです。このプロジェクトのレンダリングには特別な設定がされていると思われるので、それを解除する必要がある？ような気もしますが。

以下は髪の一部ですが、このシェーダーがうまく動いていないっぽい。左の描画結果がエラーのピンクになっています。

本来は以下のように金髪？にならないといけない。

そんなに凝って無さそうな、ActionCheckシーンの床のシェーダーまでエラーになっています。何らかのプロジェクト設定？か何かが従来のシェーダーの動きを阻害している、と推測しますが…

残念ながら、今の私の知識ではクイックな解決は無理そうです。誰か助けて！なので、今回はオッサンChalで我慢しておきます…

##5月9日 追記
軽量レンダーパイプライン のほうで、現状のスクリプタブルレンダーパイプラインに対するコメントとして「mixed mode is not fully supported」とあるので、今回の高画質レンダーパイプラインも、従来のパイプラインに依存したシェーダーとの混在がまだできない可能性が高いです。

であれば、バージョンアップによって混在可能になるまで待ち、が正解かもしれません。

あ、マテリアルごとにいまある高画質対応シェーダーを使ってちまちま設定していけば、動くかもしれませんが。こんな感じで… いや大変すぎるかw

##5月9日 追記その2

あらためて整理すると、今回の混乱の原因は「Blog記事を読む順番を間違えた」ということです。たぶん、以下の順番で読むべきだった。

1. スクリプタブルレンダーパイプラインの概要
2. 高画質レンダーパイプライン ― ビジュアル品質に重点を置いたパイプライン
3. Unity におけるフォトグラメトリ ― 現実世界のオブジェクトをデジタルアセットに

最初の 1. では Unity の新しい SRP(Scriptable Render Pipeline)の概要が説明されます。それの応用例としてまず軽量レンダーパイプライン(LW RP)と高画質レンダーパイプライン(HD RP)があり、2. の記事が HD RPの説明です。

そして 2. の HD RP における物理レンダリングをベースに、実際の風景を使って作成されたデモが 3. の記事になります。

今回の私の「オッサンを変えたい」で Unity-chan モデルがうまく表示されない、つまり従来のカスタムシェーダーが動かない理由は 2. で説明されていて、

プロジェクトを Unity 組み込みのレンダーパイプラインから HD RP へアップグレードするための変換ツールもご提供していますが、これは、マテリアルとテクスチャーの簡単な再設定のみを行うものです。ライティング、ポストプロセッシング、シーン設定、グラフィックス設定、カスタムシェーダーはすべて修正が必要となります。

私はいきなり 3. だけ読んで試したので、混乱しちゃった。もっと落ち着けよ、ということですな…

というわけで

以上、見た目が綺麗で楽しそうなデモなので遊んでみたのですが、肝心のシェーダー周りの知識がないので、ほんとうに遊ぶだけで終わってしまいました。

もう少しシェーダー周りを学んで、今後、Unity 2018.1 で実装された新しいシェーダー周りの仕組みを理解していきたいとおもいます。というわけで、チョット物足りないですが、今回はこれにて。

ではでは。