＄2-1「Leap Motion（ハンドトラッキング）のセットアップをして実際に動かしてみる」【ヘッドマウントディスプレイとUnityでVRとかMRの開発をやってみる．】

#はじめに

VRやAR開発をしていく中でオブジェクトとのやり取りをもっと簡単にできないかと思いまして，研究室に眠っていたLeap Motionを使って色々試作するためのメモ書きです．

環境一覧
SteamVR 1.16.10
Unity 2019.4.27f1 or 2020.1.17f1（動作確認済み，非対応なSDKあり）

SteamVR Plugin 2.7.3
Vive SRanipalRuntime Plugin 1.3.2.0

追加アクセサリー
VIVEトラッカー2018
Ovrvision Pro（ステレオカメラ）
Leap Motion

使用PCスペック
インテル® Core™ i7-7700K
NVIDIA GeForce GTX 1070

• 環境作成編

#1 Unityのセットアップをする　2021年 1月更新

#2 プロジェクトを作ってみる　2021年 1月更新

#3-α Unity2019でVR開発のための環境を整える（SteamVR Plugin2.7.Xをインストールする）：推奨　2021年 6月更新

#3-β Unity2020でVR開発のための環境を整える（SteamVR Plugin2.7.Xをインストールする）　2021年 5月更新

#3-おまけ UnityでVR開発のための環境を整える（SteamVR Pluginの最新版をインストールする）：非推奨　2021年 2月更新

#4 SteamVRのダウングレードと自動アップデートの停止（上級者向け）　2021年 5月更新

• コントローラの入力やトラッカー，HMDの位置座標，回転座標を得る＋α

#5 VIVEコントローラのボタン入力を取得する　2021年 2月更新

#6 トリガーの押し具合やトラックパッドの位置情報の入力を取得する　2021年 2月更新

#6-おまけ VIVEコントローラを使った開発をする時のおすすめ設定（独断と偏見）　2021年 5月更新

#7 ヘッドマウントディスプレイとコントローラの位置座標と回転を取得する　2021年 2月更新

#8 VIVEトラッカー2018を有効化してUnity上で位置座標と回転を取得　2021年 5月更新

#9 VIVEコントローラの振動機能を開発してみる　2021年 4月更新

• VIVE Pro Eyeのアイトラッキングを使ってみる

#10 VIVE Pro Eyeの視線トラッキングを有効化（セットアップ）する　2021年 4月更新

#11 VIVE Pro Eyeのアイトラッキングを使ってUnity上で瞬きや視線のデータを取得する　2021年 4月更新

#11-おまけ VIVE Pro Eyeのアイトラッキングで計測できるデータについて（適宜更新）　2021年 4月更新

• VIVE Pro Eyeのカメラを使ってみる

#12 VIVE Pro Eyeのフロントカメラの解像度（性能）とAR機能を有効化について　2021年 5月更新

• 小技

プレイエリアの境界線（シャペロン境界）が表示されないように設定を変更する　2021年 6月更新

Unity上でカメラを複数台追加してHMDやコントローラの動きを見る　2021年 6月更新

• Ovrvision Pro（ステレオカメラ）を使ってAR開発してみる

＄1-1 Ovrvision Pro（ステレオカメラ）のセットアップをして実際に動かしてみる　2021年 6月更新

＄1-2 Ovrvision Pro（ステレオカメラ）とHMDを使ってARアプリ開発する　2021年 6月更新

• Leap Motionを使ってハンドトラッキングしてみる

＄2-1 Leap Motion（ハンドトラッキング）のセットアップをして実際に動かしてみる（この記事）　2021年 6月更新

＄2-2 Leap Motion（ハンドトラッキング）とHMDを使ったインタラクティブなアプリ開発する　2021年 6月更新

• アプリを作ってみる

  VR（仮想空間）上に曲面ディスプレイを作成して大画面で広角WEBカメラ映像を見る　2021年 5月更新

今回の記事では，

1．Leap Motionのドライバをインストールして動作確認をしてみる．
2．Unity上で実際に動かしてみる．
3．HMDを使ったサンプルプログラムを動かしてみる．

という流れ．

#1．Leap Motionのドライバをインストールして動作確認をしてみる．

まずはLeap Motion公式サイトのトップページにアクセスして"GET STARTED"を押します．

リンク先から少し下にスクロールすると製品が表示されるので今回使うLeap Motion Controller下の"SELECT"を押します．

対象OSを聞かれるので今回はWindowsの4.1.0(2021年6月最新版)をダウンロードします．

ログインを求められるのでアカウント持ってなければ作成してログインします．

初回に開発者かアカウントかを聞かれるので今回はとりあえず開発者を選んでおきます．

ダウンロードが始まります．うまく始まらなかった場合にはログインした状態で手順をやり直してみてください．

さきほどダウンロードしたファイルを解凍すると""というドライバのインストーラーがあるので実行します．

インストーラーの指示通り進めていきます．

基本的にデフォルト設定のままで大丈夫です．

インストールが完了した状態でLeap MotionをPCに挿すと右下のインジケーターにこのようなアイコンが表示され，画像のように緑に光っていれば問題なく認識されています．

ドライバをインストールしたフォルダ内の""を実行します．
特にインストール先を変更していなければ""にあります．

問題なく手がトラッキングされているのが確認できました．範囲はそこまで広くないですが精度はいいので動かしてて楽しいです．

#2．Unity上で実際に動かしてみる．

次はUnity用のSDKをダウンロードするために再びLeap Motion公式サイトのトップページにアクセスして右上のタブから"DEVELOP→UNITY"を押します．

リンク先を下にスクロールしていくと"DOWNLOAD+バージョン番号(Unityの対応バージョン)(FOR WINDOWS)"というダウンロードボタンがあるので押します．

また開発者かアカウントか聞かれるので開発者にしときます．

1回目は色々宣伝みたいなタブが開くので枠外を押して閉じます．

もう一度ダウンロードボタンを押しなおすとダウンロードが始まります．

ダウンロードしたファイルはわかりやすい位置に解凍しておきます．
中身は3つの.unitypckageで入っています．

いつも通りUnity2020.1.17f1かUnity2019.4.27f1でファイルを作りSteamVR Pluginを入れておきます．
この辺は過去記事の 「#3UnityでVR開発のための環境を整える（SteamVR Plugin2.7.Xをインストールする）：推奨」か「＄1-1 Ovrvision Pro（ステレオカメラ）のセットアップをして実際に動かしてみる」を見てください．（HMDを使わないなら入れなくても大丈夫です．）

"Assets→Import Package→Custom Package..."から先ほど解凍した3つの.unitypackageを入れていきます．

一応上からCore→Hands→Interactionの順に入れていきます．

インポートするとスキャンするよう言われるのでとりあえず"Scan Current Scene"を押します．

最適化についていろいろ言われるので"Auto-fix"で自動修正してもらいます．

警告が全部消えれば大丈夫です．
実行するたびにエラーが出る場合は拒否しちゃっても動きます．（一応その時は警告文の中身を確認してください）

"Assets→Plugins→LeapMotion→Hands→Examples"にあるHandBindingという名前のサンプルシーンを開きます．

問題なく動けばUnity上でもLeap Motionがちゃんと認識されています．

#3．HMDを使ったサンプルプログラムを動かしてみる．

次にHMDを使ったサンプルを動かしていきます．
とりあえずHMDの前面に張り付けます．今回はとりあえずサンプルなので適当に貼っちゃいます．

"Assets→Plugins→LeapMotion→Core→Examples"のCapsule Handsを開きます．このサンプルはVRに対応していますのでそのまま実行します．

貼り付けが適当なので位置がずれていますがとりあえずHMDで手を確認できました．

次回は実際にLeapmotionを使ったインタラクションのプログラムを作っていきます．