HoloLens Advent Calendar 2018の17日目です。
UnrealEngine4.21.0より、WindowsMixedRealityHeadset(以後WinMRと表記)がネイティブサポートされました。
今まではUE4でWinMRのデバイスを使うとなると、
Windows Mixed Reality for SteamVR on Steamを使ってWinMRデバイスをSteamVR経由で認識させて使うか、
UWP用のUE4のカスタムエンジンをビルドして使う(参考)か、の2パターンぐらいでしか使えませんでした。
(こんなUE4とWinMRの本もでてました。)
そういったちょっと特殊なことをやらないとUE4ではWinMRデバイスを使うこともできなかったのですが、最近ネイティブサポートされたので、その辺りで具体的に何ができるのか、適当に見てみようかと思います。
##環境
環境については、記事投稿時点での最新にしています。
(また、Windows Mixed Reality for SteamVR on Steamはアンインストール済みです。)
| バージョン | |
|---|---|
| Windows10 | Windows 10 October 2018 Update Version 1809 |
| UnrealEngine | 4.21.1 |
| VisualStudio2017 | 15.9.4 |
##公式の情報
https://docs.unrealengine.com/en-US/Platforms/VR/WMR
(情報ほぼなかった。)
##ひとまずVRテンプレートで動作確認
VRテンプレートでプロジェクトを作成します。
プロジェクトが作成できたら、まずプラグインを有効にします。
Pluginsの「Built-In」→「Virtual Reality」から「Microsoft Windows Mixed Reality」を有効にします。そして、UE4を再起動します。
「VirtualRealityBP」→「Map」→「MotionControllerMap」を開き、
MixedRealityポータルが起動している(or起動できる)状態で、VRプレビュー実行をすると、そのままWinMRデバイスでVRテンプレートがプレイできます。
MixedRealityポータルを介して、UWPのアプリが起動した状態でプレイしているような感じになっていました。
Windowsボタンからホームに戻ると、「UE4Game_WindowsMR」というUWPアプリが起動している状態になっています。
ちなみに、UWP向けのパッケージ化は相変わらずできませんが、
Windows向けにパッケージ化した実行ファイル(exe)を実行しても、同様にMixedRealityポータルからWinMRデバイスでプレイできるようになっていました。
##ブループリントから呼べるノード等
現状呼べそうなノードはこれらみたいです。
####入力以外のあれこれ
| ノード | 概要 |
|---|---|
| GetVersionString | 使用しているデバイス名(例:Samsung Windows Mixed Reality 800ZAA)を取得 |
| IsCurrentlyImmersive | 3Dアプリとして(VRモードで)実行されているかどうかを取得 |
| LockMouseToCenter | マウスポインタを画面中央に固定するかどうかを設定 |
| ToggleImmersive | 3Dアプリとして(VRモードで)実行されているかどうかを設定(3Dアプリとして実行されていない場合はMixedRealityポータルでデスクトップが表示され、Windows上で普通のWindowsアプリとして実行された状態になる) |
####入力のあれこれ
| ノード | 概要 |
|---|---|
| WindowsSpatialInput(L)TouchpadX | 左手コントローラーのタッチパッド上の触れているX座標(-1.0～1.0) |
| WindowsSpatialInput(L)TouchpadY | 左手コントローラーのタッチパッド上の触れているY座用(-1.0～1.0) |
| WindowsSpatialInput(R)TouchpadX | 右手コントローラーのタッチパッド上の触れているX座標(-1.0～1.0) |
| WindowsSpatialInput(R)TouchpadY | 右手コントローラーのタッチパッド上の触れているY座用(-1.0～1.0) |
| ノード | 概要 |
|---|---|
| WindowsSpatialInput(L)Menu | 左手コントローラーのメニューボタン押下 |
| WindowsSpatialInput(L)Touchpad | 左手コントローラーのタッチパッド押下 |
| WindowsSpatialInput(L)TouchpadIsTouched | 左手コントローラーのタッチパッド接触 |
| WindowsSpatialInput(L)TouchpadX | 左手コントローラーのタッチパッド上の触れているX座標(-1.0～1.0) |
| WindowsSpatialInput(L)TouchpadY | 左手コントローラーのタッチパッド上の触れているY座用(-1.0～1.0) |
| WindowsSpatialInput(R)Menu | 右手コントローラーのメニューボタン押下 |
| WindowsSpatialInput(R)Touchpad | 右手コントローラーのタッチパッド押下 |
| WindowsSpatialInput(R)TouchpadIsTouched | 右手コントローラーのタッチパッド接触 |
| WindowsSpatialInput(R)TouchpadX | 右手コントローラーのタッチパッド上の触れているX座標(-1.0～1.0) |
| WindowsSpatialInput(R)TouchpadY | 右手コントローラーのタッチパッド上の触れているY座用(-1.0～1.0) |
VRテンプレートが何も設定せず普通に操作できるため、ある程度の部分は共通となっていました。
MotionControllerコンポーネントでのトラッキング状態取得やトリガー等の(上記以外の)入力取得は従来のものでできるようです。
##さいごに
UWP出力ができるわけでもないので、メリットとしては、
公式のUE4オンリーで、WinMRデバイスが使えるぐらいしかなさそうです。
(デバイスがOculusRiftやHTCVIVEでいい場合は特にメリットなさそう。)
ただ、デバイスとしてWinMRのメリット(外部センサーが不要、動作要求スペックが低い等)はあるので、意味はあるかなという感じです。
(トリッキーな活用法としては、従来のWindowsアプリとWinMRの3Dアプリを行き来するアプリが作れますね。)
何故か公式の情報がセットアップ方法ぐらいしかありませんでしたが、基本的に今までのVR開発の手法が使えるので、WinMRデバイスしか持っていなくてもOculusRiftやHTCVIVEに対応したコンテンツを、UE4で作れそうですね。
明日は18日目、@SatoshiSugaiさんです。