【Unity】Pico Neo 3 VRアプリ開発 (3) ～ Pico Neo 3の独自機能紹介 ～

はじめに

前回はデバイス共通のアプリ開発方法について書きました。
今回はPico Neo 3の独自機能を紹介します。

【Unity】Pico Neo 3 VRアプリ開発 (1)
【Unity】Pico Neo 3 VRアプリ開発 (2) ～ XR Interactions Toolkitを動かす ～

注意：Picoサイトのドメインが変更されたようです
旧ドメイン
https://pico-interactive.com
新ドメイン
https://picoxr.com/jp/

現在のウェブサイトは2022年5月20日（または2022年5月20日）よりwww.picoxr.comに更新されます。

との記載があります。

• ホストアドレスへのアクセスは新ドメインにリダイレクトされますが、すべてのURLが新ドメインにリダイレクトされる訳ではないようです。
  現時点(2022/05/23)では他サイトからのリンクは修正されていないケースが多いようなのでPico関連の情報を検索する場合は注意が必要です。

ビデオパススルー

• 周囲確認のカメラ映像をコンテンツの背景として表示できます。
  現実空間(白黒)に3Dオブジェクトを重ねるコンテンツを作れます。
  以下のAPIを任意のタイミングでスクリプトから呼び出してください。
  • 実行中に有効/無効を切り替えることも出来ます。

PXR_Boundary.EnableSeeThroughManual(true);

• カメラのClear FlugはSolid Color、Background 0x0000000にして下さい。
  

• また、これとは別にカメラをRawImageとして取り込むAPIも提供されています。

Foveated Rendering(中心窩レンダリング)

中心から周辺に離れるほど解像度を下げる事で描画負荷を下げパフォーマンスを改善します。

• 外側ほどジャギジャギしていて解像度が落ちている事が分かります。
  設定により強弱を変更できます。画像はTop Heigh。
  

Pico Neo 3 Eyeなら目の動きに合わせた動的中心窩レンダリングにも対応しているようです。
(手元に端末が無いため未確認)

Metorics Tool

• アプリをインストールする事でオーバレイ表示でFPS、GPU/CPU使用率をグラフ表示できます。
  その他設定により表示出来る項目があります。
  • 詳細はドキュメントを参照してください。

• 導入方法
  • 上記サイトよりDownload
    
    
• MetricsTool xxx.apk をPico Neo 3 Proにインストールしてください。
  • アプリ一覧に Pico Metrics Tool が表示されます。
    
  • 起動し、設定を行うとアプリ起動中に画像のようにGPU FPS CPUの状況がオーバレイ表示されます。

Preview Tool

スタンドアローンVR端末の開発でネックになるのが、動作確認のために毎回ビルドする必要がある点です。
PicoではPreview ToolによりUnityEditorから直接HMDに映像を映してデバッグするPreview Toolが提供されています。

• PCとPico Neo 3端末にそれぞれPreview Toolアプリがあり、接続して実行します。

Unityプロジェクトの設定

• Project Settings>XR Plugin Managementの
  Androidではなく"PC"のPlug-in ProviderをPicoXRにしてください。
  
  Platformは切り替え不要。Androidのままで大丈夫です。

PC、Pico両方にそれぞれPreview Toolをインストールする

• PC側
  • PreviewTool.exeを実行
  • 
  • 以下のウィンドウが立ち上がります。
  • 
• Pico Neo 3側
  • PreviewTool_XXXX.apk をインストール
  • 
    
    
• Wireless Connection またはWired connectionを選びましょう。
  • 私の環境ではUSB接続(Wired Connection)では接続できず、Wireless Connectionを使用しました。
• 接続されるとHMD内の表示は真っ暗になりますが問題ありません。PC側はConnectedと表示されているはずです。
  
• この状態でUnityEditorでPlayするとHMD側に表示されます。

両眼立体視ではない、Grabが出来ないなど、気になる点はありますが、ちょっとした確認には十分な印象です。

おわりに

Pico Neo 3 独自の機能について紹介しました。
今回調べてみて、開発向けの周辺機能も充実している事が分かりました。
一つ一つのトピックについてはあまり掘り下げていませんので、公式ドキュメントをご覧いただければと思います。