最近UnityJapanのYoutubeチャンネルでビジュアルスクリプティングでOSCを使用するというネタの動画が上がっていました。
そちらの動画を参考にiOSの加速度データをOSCでUnity(Windows)に飛ばすサンプルを実装しました。設定周りで少し躓いたりしたのでメモとして情報を残しておこうと思います。
Unityバージョンは2021.3.2f1です。使用しているライブラリが対応しているのがUnity 2021.3 or laterなのでそれ未満のバージョンでは上手く動かないかもしれません。
受信側の設定
まずはUnity側の設定からやっていきます。
ライブラリのインポート
OSC通信を簡単に扱えるようにラップしてくれているライブラリがあるのでそちらを使用します。本記事で使用するバージョンは2.0.0です。
なお、冒頭で紹介したUnityJapanの動画では同じ作者さんのビジュアルスクリプティング用のライブラリを使用していますが、この記事では普通(?)にコードを書く用のライブラリを使用します。ビジュアルスクリプティング用のライブラリも裏ではこちらのライブラリを使用しているようなので機能的には変わらないと思います。
こちらのライブラリをインポートするためにUnity側の設定を変更します。
Package Managerへのリポジトリの登録
まずはEdit→Project Settings→Package ManagerからPackage Managerの設定画面を開きます。
設定画面のScoped Registriesという所に以下のようにリポジトリ情報を登録します。
Name : Keijiro
URL : https://registry.npmjs.com
Scope(s) : jp.keijiro
これで作者のKeijiroさんが公開しているパッケージをPackage Managerからインポートできるようになりました。
パッケージのインポート
続いてWindow→Package ManagerからPackage Managerを開きます。
ウインドウ左上のPackages:の項目をMy Registriesに変更します。 Assetstoreのアセットしか出てこない！となった人は"My Assets"になっているので"My Registries"にしましょう。
そうするとKeijiroさんが公開しているパッケージの一覧が表示される筈なので、そこから"OSC Jack"を選び、右下の"Install"からパッケージをインポートします。
設定ファイルの作成
OSCの接続情報の設定ファイルを作成します。Assetsウインドウの適当なところで右クリック→Create→ScriptableObjects→OSC Jack→Connectionを押すと設定情報を持ったOSC ConnectionというScriptableObjectが作成されるので、適当な名前を付けます。
設定は以下のようにします。
設定が完了したらシーン中の適当なオブジェクトに EventReceiver というコンポーネントをアタッチします。Event ReceiverのプロパティのConnectionという所に先ほど作ったOSC Connectionファイルを設定します。OSC Addressという所も設定する必要があるのですがこちらは送信側に依存する値なので今は置いておきます。
送信側の設定
iOSからOSC通信が出来るアプリはいくつもAssetstoreで公開されています。どれを使っても問題ないと思いますが、本記事では無料で公開されているZIG SIMというアプリを使用します。こちらのアプリは加速度やジャイロセンサ等のスマホのセンサ情報を色々とOSCで飛ばすことができます。
アプリをインストールしたら、SensorタブからUnity側に飛ばす情報を選びます。本記事では加速度センサの情報を取りたいのでACCELを選びます。
続いてSettingsタブで送信側の接続情報を以下のように設定します。
DATA DESTINATION : OTHER APP
PROTOCOL : UDP
IP ADDRESS : Unityが動いているPCのローカルIP
PORT NUMBER : OSC Connectionで設定したポート番号(記事の場合は8000)
MESSAGE FORMAT : OSC
MESSAGE RATE : 必要に応じて(通信状況やセンサの性能次第では必ずしもこのレートが担保されるとは限りません)
これで送受信双方の設定が出来ました。が、Unityが動いているPCのファイアウォールの設定次第ではOSCがブロックされる場合があります。Windowsの初期設定ではブロックされるので許可しましょう。iOS→Windowsに向かってpingが通れば大丈夫だと思います。
ファイアウォールの設定
この設定はウイルス対策ソフトを使用している場合はそちらで設定する必要があるかもしれません。ここで紹介しているのはWindows Defenderのみを使用している場合の設定です。また当然ですがファイアウォールの設定を緩めることはセキュリティリスクを高めることになるので気を付けましょう。
右下のネットワークアイコンからネットワークとインターネットの設定を開きます。
ネットワークの状態から、今接続しているネットワークがパブリックネットワーク、プライベートネットワーク、ドメインネットワークのどれかを調べます。下の画像の場合はプライベートネットワークです。
そうしたら次は設定の検索に「Windowsセキュリティ」と打ち込んでセキュリティ設定を開き、ファイアウォールとネットワーク保護を開きます。
詳細設定を選びます。
ファイアウォールの設定画面が開くので、左側のビューから受信の規則を選びます
そうすると、ウインドウ中央のビューに様々な規則が表示されるので、そこからファイルとプリンターの共有(エコー共有 - ICMPv4 受信)を探します。2つあると思いますが、プロファイルの列の値を見て、接続しているネットワークの方を右クリックして規則の有効化をします。
これでファイアウォールの設定が完了しました。
送受信の接続
これでOSCの疎通が出来るようになったはずです。UnityのWindow→OSC MonitorからOSC Monitorを開きましょう。最初は何も表示されていませんが、OSCのパケットが来たらその情報がここに表示されます。
Unityのプレイボタンを押した後iOS側からOSCを送ってみましょう。ZIG SIMの場合Startボタンを押したら設定に応じてセンサ情報が送られます。以下のように接続情報と送られてきた値が表示されればOKです。スマホを振ったらaccelの行の値が大きくなるはずです。
この値を自前のスクリプトで受け取るためには送信側のOSC Addressを知る必要があります。OSC Monitorでデータの前にコロン区切りで表示されている文字列がアドレスになります。上の画像の場合だと加速度の値を取得するためにはEvent ReceiverのOSC Addressの欄に/ZIGSIM/FGlaY4GSu3UJToRZ/accelを入れます。
続いて、受け取ったデータを処理するスクリプトを書きます。今回はシンプルにDebug.Logで加速度の値を吐くだけのものにします。
using UnityEngine;
public class OSCReceiveSample : MonoBehaviour
{
// 必ずpublicにし、引数はVector3が1つ
public void Receive(Vector3 accel)
{
Debug.Log(accel);
}
}
このスクリプトを適当なGameObjectにアタッチします。加速度の情報は3つの実数の組なので、Event ReceiverのData TypeはVector3とします。その後、先ほど作ったスクリプトのReceive関数を呼び出すように設定します。最終的に以下のようになるはずです。
コンソールに以下のように加速度情報が表示されれば成功です。もしもEvent Receiverがエラーを吐いたりした場合はUnityエディタを再起動してみてください。
まとめ
非常に簡単にスマホのセンサ情報をOSCでUnityに飛ばすことが出来ました。スマートフォンをコントローラにする、といった使い道が出来そうです。