ARCore とセルシェーダーと環境光推定
田舎の開けた場所で。
照明が入るとキャラよりもメカで遊びたくなる。
昼間＆夜間
NPR セルシェーダーにはつらい照明環境
— サトー (@sator_imaging) August 14, 2019
Light Estimation with #ARCore pic.twitter.com/X3oPEKvpoC
ARCore の Light Estimation
Light Estimation は環境光推定って訳でいいのだろうか。
光源
- 光源の向きは良い感じ。
- 夜間に自動販売機の横に置いたらちゃんと照明がその向きから来た。
- けど自販機の横を過ぎてタイムラグがあってからライティングが反映された。
- 影の色や強さは拾ってくれない。
- 影の中にキャラを置いても日陰にいる感じにはならない場合と、なる場合がある。
- 照明の明るさは怪しい…？
- スマホの照度センサーを覆っても明るさは変わらなかったので、センサーを使っているわけではなさそう。
- セルシェーダーの場合は、ライトの明るさをクリップしないと明るくなりすぎる。
- 背景のカメラ画像の平均輝度をライトの明るさにする、ぐらいが丁度よさそう。
スカイボックス（映り込み）
- スカイボックスも作ってくれてるみたいだけど、ちょっと良くわからない画像になってる。
- どこで撮影しても同じテンプレの画像を使ってるように見える。
- 明るいライトや草とか、特徴的な部分は映り込んでほしかった。
- 映り込み用のスカイボックス画像は自前で作った方が良さそう。
- どこで撮影しても同じテンプレの画像を使ってるように見える。
その他
- カメラのブラーやボケ、グレインは上手いこと合わせたい。
- ARCore の設定でフォーカスモードを Fixed にすればボケは気にしなくても良さそう。
- パンフォーカスだとしてもカメラのモーションブラーは付けないと合わない。グレインも。
- スマホのカメラの焦点距離とか取得できそうな気がする。けど機種間で差がありそうだ。
- ARCore の設定でフォーカスモードを Fixed にすればボケは気にしなくても良さそう。
歩きながらキャラを置いたら
デレステの AR モード
デレスポが出る、 のでデレステのアカウントを復旧したら AR モードが付いてた。
Vuforia SDK
使用しているのは Vuforia というやつ。
AR マーカー（画像）以外にも立体物の認識が出来るようだけど、フィギュアを認識してどうこう、みたいな機能は特に見当たらず。
デレステ AR モードの利用規約
参考。
