1. 概要
簡単に入手可能な脳波デバイスといえばNeuroSkyのMindWaveが有名ですが、他のものも試してみたくなりEmotivのEPOC+を使ってみました。
予想以上に情報が少なくて(特に日本語は)大変だったのでメモしておきます。
多分自分ももう一回使うことがあったら忘れてそうなので。
脳波でイメージした動きを記録して、それをOSCで送ることを目的としていましたが、結論としてはMind Your OSCsで接続しようとするとソフトウェアがクラッシュしてしまいOSC送信はできませんでした(Windowsでも試しましたがダメでした)。
そのため画面内のオブジェクトを脳波で動かすところまでです。
動きをイメージするのが難しかったです。トラックパッドを上に動かしながらそこに集中することで上手くいくようになりましたが、最初は画面に手をかざして念力を送っているようなイメージだった(実際に手をかざしていた)ので、脳波計を付けている状態とあいまって相当怪しい感じでした。
2. 環境
- 脳波デバイス
- Emotiv EPOC+ (EMOTIV EPOC+ - 14 Channel Wireless EEG Headset)
- ソフトウェア
- Emotiv Xavier Control Panel 3.3.3
- Emotiv Xavier Composer 3.3.3
- Mind Your OSCs 3.4.0
- PC
- Macbook Pro (Retina, 13-inch, Mid 2014) & macOS Sierra 10.12.6)
3. 参考サイト
-
Processing + EPOC via OSC – Hyperritual
- MindYourOSCsの使い方が載っている
- 脳波でProcessing内の物体を動かすデモ
-
Where can I find a user manual? – Knowledge Base
- マニュアル。今とUIや名前が違うがキャプチャ画面の構成から推測して、流れや役割を何となく理解できる
4. 手順
4.1 ソフトウェアのインストール
Emotiv ControlPanelとMind Your OSCsをダウンロードします。
それぞれ以下のURLからダウンロードします。無料ですが購入と同じプロセスが必要なので、アカウントを作る必要があります。
-
EMOTIV Control Panel - Emotiv
- EPOCからの情報を受け取り、センサの状態などを
- Mind Your OSCs - Emotiv
Checkoutするとダウンロードリンクが表示されますが、分かりにくいです。
4.2 Emotiv ControlPanelを起動する
Emotiv ControlPanelを起動します。
4.3 脳波デバイス/シミュレータを調整する
Emotiv EPOC+(脳波デバイス)がない場合でもEmotiv Xavier Composer(シミュレータ)があるので、そちらで試すことができます。
4.3.1 Emotiv EPOC+(脳波デバイス)を使用する場合
USBドングルを挿して、Emotiv EPOC+が認識されると以下のような画面になります。
左側の頭の画像の黒い丸が全て緑になるように、スポンジを濡らして頭に押さえつけます。頭が冷たいなって分かるくらいでないと反応しないように思います。
4.3.2 Emotiv Xavier Composer(シミュレータ)を起動する場合
Emotiv Control Panelの左上のメニューのApplicationの中のEmotiv Xavier Composerを選択します。
Emotiv Xavier Composerが起動します。
Auto Resetにチェックを入れてStartを押します。
Emotiv ControlPanelに戻り、左上のメニューからConnect - Connect Composerを選択します。
アドレスとポートが入力された状態でダイアログが開くのでそのままOKを押します。
Emotiv Xavier Composerに接続されます。
4.4 Mind your OSCsを起動する(失敗)
ControlPanelを起動したままMind Your OSCsを起動します。左側のドロップダウンリストからControlPanelを選択してConnectを押すと、中央のパラメータが変化します。
Emotiv Xavier Composerの場合はドロップダウンリストからEmoComposerを選ぶとControlPanelを介さず接続できます。
ただOSCのConnectを押すとソフトウェアがクラッシュしてしまいます。
Windows(Windows 10 Pro 64bit)でも同じでした。
Webでも同様の報告があります。
Mind Your OSCsはサードパーティが作成したオープンソースとのことで、ソースを自分で見てなんとかしないといけなさそうです。
Mind your OSCs download | SourceForge.net
4.5 Mental Commands
Mental Commandsはトレーニングによって頭で思い描いた物体を動かすイメージを記録して、ContorolPanel内の物体を動かすことができます。
4.5.1 Mental Commandsメニューへ移動
左上のメニューからDetections - Mental Commandsを選びます
このような画面が表示されます。
4.5.2 ニュートラル状態の記録
左側のタブからTrainingを選択し、「Record Neutral」を押してニュートラル状態の脳波を記録します。
30秒ほど掛かります。
記録できました。
4.5.3 Mental Commandsの記録
次にActionsタブに戻り、動かしたい動きを選びます。
下のAddボタンを押します。
左下の表にアクションが追加されたら「Apply」を押します。
アクションの種類はこの中から選ぶことができます。
再び「Training」タブに移動します。
先程選んだアクションにxマークが表示されています。
「Animate Model According to Training Action」にチェックを入れて、その下の「Start Training」を押します。
記録が始まり画面上のが動き始めます。この場合「Push」を選んだので物体は奥に動いてきます。
時間は8秒です。このときに私は指でトラックパッドを上に動かす動作をして、指先に集中してみました。
記録が終わるとダイアログボックスが開くので「Yes」を押します。
先程のxマークがチェックマークに変わります。
「Action」タブに戻って先程記録した時のイメージをすると物体が動きます。