iOS で ARKit の Recording and Replay で現地にいなくてもリモート実験（デバッグ）する

はじめに

現在 TOKYO NODE XR HACKATHON powered by PLATEAU とういのに参加しています。

虎ノ門ヒルズ ステーションタワー （およびその周辺）で、あたらしい AR体験 をつくるぞ！　というハッカソンです。

iOS アプリ開発がゴールなのですが、みなさんご存知のように、AR アプリを実験するときは「現場」にいないと作業できません。

そう「あるあるな開発者の要望」が

1. 人がたくさん歩いている商業ビルでスマホ操作程度はいいけれど、MacBook 開きつつのデバッグはちょっとアレ
2. ひらたくいえば、おうちやオフィスで開発作業（実験・デバッグ）したい。

ではないでしょうか。

とくにわたしは東京在住ではないので、実験するたびに東京の虎ノ門へいくのは非常に困難で、まずデバッグ手法を確立することが最優先でした。

なお Android の場合はこちらがつかえそうです。

これは昔に別件で試した。良い感じだった。

手順

1. iPhone (or iPad) で専用アプリをつかって現場撮影する
2. 開発マシン (Mac) にその動画ファイルをコピーする
3. XCode でその動画ファイルを再生実行させる

1. 現場撮影する

利用するのは、Apple 謹製の Reallity Composer です。

こちらをまず iPhone にインストールします。

あとはこんな感じの手順となります。

1. Reallity Composer を起動します
   

2. 一覧から新規追加する （2回目以降の操作の場合はすでにある一覧から選択するのもOK）
   

3. 上のを選ぶ
   

4. 画面右上の点三つのアイコンを選ぶ
   

5. Developer を選ぶ.png
   

6. Record AR Session を選ぶ
   

7. 位置情報を記録するかどうか選択する

   • これはアプリによります。位置情報を記録している動画を再生する際に、もしアプリ側が位置情報をつかわない場合などアプリのセキュリティ要件にひかっかって画面が真っ黒のまま 「センサーの準備ができていません」 というようなエラーログが吐き出されているような状態になります。
   • 今回の Hackathon 参加者は、サンプルアプリや用意されたSDKを元に開発を進めるにあたって、とりあえずここは OFF　にしたほうが安全です。普通に開発するならとくにここで位置情報を記録しなくとも問題ないでしょう。
     

8. 録画を開始する
   

9. 適度に撮影したら録画を停止する

   1. 比較的ゆっくり動かした方があとあと使いやすいです
   2. スマホの容量が十分なら、十分長い動画を撮影しておきましょう。ファイル容量が大きくなっちゃいますが、あとで QuickTime などでトリミングして、動画の任意の部分だけ切り出してもつかえるようです
      

10. Dシェアする

    1. AirDrop も便利ですね
       

シェアしわすれた。あとでシェアしたい場合。

1. Developer　メニューから Replay AR Session を選ぶ
   

2. Edit を選ぶ!
   

3. 録画した動画を選択するとシェアできるようになる
   

3. 開発中のアプリで再生する

1. Xcode で ARKit Session が記録された動画ファイルをコピー

   1. ここにファイルをドラッグしてコピーする
      

2. ファイルをドロップしたらダイアログがでますが基本的にそのままでオッケー
   

3. 実行時のスキーマを設定します
   

4. Run の Option タブで ARKit Replay の設定をします
   

5. Run
   

これで、録画した動画が、ARの対象になってリモート実験することができます。

動画ファイルの容量が大きいため、普段の Run よりも起動までに数十秒〜数分時間がかかりますが気長に待ちましょう。

作業環境によりますが、iPhone を Mac は Wi-Fi 接続よりも USBケーブルで有線接続しておいた方が安心かもしれません。

今回のハッカソン参加者さんへ

ToranomonSDK は、ロケーションの判定がおわるまで、10〜15秒ほどかかるので、最低でも20秒以上できれば1分くらいの動画がテストにあたって望ましいのかなと思います。

ハッカソンって、面白いものを作るのは当然だけど、そのために「作りやすい環境」の準備もとても大事なんですよね。

他の参加者のみなさんは賞金狙い？！ならライバルでもあるので、知見の共有にすこし抵抗があるかたもいらっしゃるかもしれませんが、人との出会いもとっても大切だと思います。

できるかぎり知見を共有しながらどんどんよい作品を競争・共創？できる会になればいいなぁと願っています。