LISはドワンゴ（dwango）社が開発したディープラーニングと強化学習を体験できるアプリケーションです。

話題になってから少し時間が経過しましたが、Unityを使うという心理的障壁から手を出せずにいました。年末なのでやるか、と思ったのですがUnityの障壁はほぼ感じることなくできました。ここに記録を残しておきます。

ということで、Unity初心者（初めて動かす）でもできる手順を書いておきます。

準備

事前に、Unityをインストールしておく必要があります。

READMEにある通り。Macなので、リポジトリをクローンして、

$ git clone git@github.com:wbap/lis.git
$ cd lis

必要なものをインストールして、

$ pip install -r python-agent/requirements.txt

データを持ってきます。これ40分くらいかかりました。

$ ./fetch.sh

サーバーを動かします。

$ cd python-agent
$ python server.py

Unityを起動するときにOpenを選び、 unity-sample-environment をOpenしました。アラートが出ましたが、そのまま、進んだらプロジェクトが起動しました（Unity初心者）。

下記のSceneディレクトリの中のSimpleを選択し、

画面上部のスタートボタンを押します。この状態で2,3分待ちました。READMEによると、caffeのモデルを読み込むのに時間がかかるようです。

この状態で、数分待ちました。

動き出す

なんか、変な視点で動き出しました！

なにやら、緑の箱にぶつかると報酬を得られる様子（ログが出てる）。そして、最初は避けていたのに、どんどん自分から当たっていく？

Sceneを押したら、視点変えられた。こんなんなったー。なんか可愛い。

報酬履歴を見る

READMEにある通り、

$ cd python-agent
$ python plot_reward_log.py

これで見れると思ったら、下記のエラーが出ました。

$ python plot_reward_log.py
Traceback (most recent call last):
  File "plot_reward_log.py", line 1, in <module>
    import matplotlib.pyplot as plt
ImportError: No module named matplotlib.pyplot

エラーで検索して、matplotlibをインストール。

$ pip install matplotlib

次はこれ。

Traceback (most recent call last):
  File "plot_reward_log.py", line 2, in <module>
    import pandas as pd
ImportError: No module named pandas

同様に。

$ pip install pandas

再度、実行してみました。

でました〜。やった。まだ回数が少ないながらも、少しずつrewardが獲得できるようになっている？

ということで、lis動かせて楽しかった😁

その後...

数時間起動して、LISの動きを見て見たら、ちゃんと緑のブロックにあたりに行ってる！

うれしかった...。

参考

wbap/lis

お願い

冒頭の定義など間違っていたら優しく教えていただければ...。