VR内で文字を入力する
この記事は、Oculus Rift Advent Calendar 2016 の17日目です。
http://qiita.com/advent-calendar/2016/oculus-rift
昨日はおかずさんの「VRコンテンツ開発について雑多に色々描いてみる」でした。
酔った勢いとは思えないまとまり具合でVR開発について具体的な改善案を提示されており、素晴らしいです。
VRのインフラ化を目論むにあたって、文字入力は死活問題です。現在の、ソーシャル機能を中心にいくつものキャズム超えてきた（※個人の見解です）コンピュータシステムにおいて、文字入力は全てのベースとなる機構です。
将来的には当然ながらVRならではの操作系が台頭してくる事が予想されますが、それまでの間はバーチャルディスプレイも併用されていく事になるでしょうし、快適に文字入力ができることの必要性は小さくないと考えます。
本稿のために VR 向けの日本語入力プログラムを作成しましたので紹介します。※Unity 用です。
なお、これは Oculus Rift Advent Calendar であるため、使用する機材として Oculus Touch を定めます。
なお、成果物を GitHub に公開しています。
https://github.com/yutokun/VR-Text-Input
キーボードについて
タイプライター時代から使われて来たキーボードという機構は、コンピュータへの文字入力においてスタンダードになっていますが、以下の理由からVRで快適とは言えません。
- 動きが細かい
- 5本の指の動きを取得する手段がない
- 通常キーボードを入力する時に支えてくれるパームレストを確保できない（重要）
そこで、こうです
出来るだけ楽に、最小の動きで入力できるようにするため、下記の点に気を使いました。
- なるべく運動量を少なく
- 細かい動きを必要とせず
- 片手だけで操作できる事
操作方法
1.腕をひねって入力する文字を選びます。子音が切り替わる時に Touch が振動でフィードバックを返し、操作感を高めています。
2.人差し指を押し込むと母音を選ぶ状態になり、離すと決定です。かなり快適です。
3.人差し指を押し込んだ状態でスティックを上下に操作すると、上下のバリエーションが入力されます。
連続入力が可能です。
4.中指を押し込むと「はまやらわ」に切り替わります。離すと「あかさたな」です。
現在の問題
- キーボードやフリック入力と違って人が不慣れな形式なので最初のハードルは多少あると考えられます。
- また、狙った1つ前の母音が入力されている事がままあります。その辺り、直前の移動ベクトルを見て調整する余地はありそうです。
- どの階層にいるのかわかりづらくなっています。階層で色を分けると良いかもしれません。
- 母音の選択もわずかに拡大するなど、わかりやすくする工夫がありそうです。
他の事例
最後に、他に試みられている事例を紹介します。
キーボード
Oculus Quill より
そのまんまキーボードです。視線やハンドコントローラーで狙いを定めるものが多いようです。
時間がなければこれでも良いでしょうけれど、作る作業は地味になりそうだし皆が配置を知っている事以外にメリットはありません。
フリック入力
by [@pafuhana1213](https://twitter.com/pafuhana1213)これが…！おかず式VRキーボード ver0.1.0だ…！ #UE4 #VR pic.twitter.com/FvDxKS0Gqn
— おかず（カントーのすがた） (@pafuhana1213) 2016年11月14日
スマートフォンのフリック入力にインスピレーションを得ているパターンです。
入力デバイスの位置に関わらず利用でき、キーボードほど細かい操作を必要とせず、多くの人にとって馴染みのある入力方法である点が優れています。
扇形入力
今回採用している方式です。スマートフォン向けATOK等でも見かけたように思いますが、記事を書いているときに探したらなんとVR向けに先行例がありました。
Unreal Engine 4 でてんちょーさんが製作されているVR用キーボードです。
今回作成したものと、操作方法は異なっているようです。（よかった…）
入力操作の細かい所はわかりませんが、キーボード型の英数向けからスタートしているみたいですね。 Twitter の Moments でまとめられています。ボタン+スティック タイプのキーボードを作ってみた(日本語版) #UE4 #VR_keyboard https://t.co/4VJTxECrLx
— てんちょー (@shop_0761) 2016年11月14日
⚡️ "VRキーボードまとめ" #VR_keyboardhttps://t.co/PrInztY3g7
— てんちょー (@shop_0761) 2016年10月27日
音声入力
声で入力するパターンです。正確な入力はできませんが、チャットする分には十分なのではないでしょうか。普通に音声チャッry
プラットフォーム依存性が高く、使用料がかかる場合もあるため使い放題は難しいですが、2016年12月現在、VR内で一番手軽なものはこれです。
Windows Speech
Unity に API が用意されており、非常に手軽にオフラインで使えます。
Windows の音声入力サービスを使用し、Windows 10 専用です。現状VRはほぼ Windows 専用と言っても差し支えないので、ちょっと遊んでみる分には大きな問題はないでしょう。
まとめ
VR では豊かなジェスチャーによる自然なコミュニケーションが可能なため、文字入力に対する要求は現状そこまで大きくなってはいないと感じています。
しかし、よく言われるように「ユーザーは手に入れるまでそれが本当に欲しかったものなのかわからない」のです。いつか誰かが、物理キーボードよりも快適な入力手段を実現すれば、将来のVRがスマートフォンのように当たり前に溶けてしまう未来の一助となるかも知れません。
もし誰かがこの記事を読んで、よっしゃやってやるぜ！ という気持ちになっていただけたなら、なんか凄くてヤバい激エモインプットを作ってみて下さい。よろ！
なお、今回の入力システムを使ってみたいという方は下記の GitHub から .unitypackage をダウンロードできます。
https://github.com/yutokun/VR-Text-Input
プルリク、Clone、助言、使ったよ報告など大歓迎です〜〜！
Next Article
明日は きゅーこん さんの「Oculus Storeでの配布方法」です。
私もそろそろ何か Oculus Store に上げようと思っていたので参考になりそうです！