※注意・・・寝不足でうつらうつらしながら書いたので支離滅裂な部分あるかも・・・明日直す。
はじめに
前回は世界で一番はじめにMovidius NCSの記事を書くがために、取り急ぎって感じでサンプルだけ動かしました。実は幾つか問題点がありまして、その修正とサンプルのもう少し細かな動作確認までしようと思います。
前回の課題
下記２つが挙げられます。
- ネットワークのコンパイルをラズパイ上で行っている
-
setup.shしているだけで、何をやっているか見えない
本来はサーバマシンなどでネットワークをコンパイルしてからラズパイに送るのが筋となっています。何故ならば、ネットワークのコンパイルにはそれなりのメモリが必要で、ラズパイ上だとAlexNetがコンパイルできません。前回はGoogLeNetのみ確認しましたが、今回はAlexNetも動かします。また、setup.shで何をインストールしているかが不明だったので、今回は手動でDocker内のUbuntu環境に各モジュールをインストールしていこうと思います。
今回の構成
ネットワークコンパイルのために、RasberryPI以外の少し性能の良いPCを用意します。MacでもWinでもDockerが動けば何でもOKです。ちなみに、公式の動画ではコンパイルでもMovidius NCSが必要っぽく書いてありますが、実際は不要でした。従って、ネットワークの準備はDockerが動けば、どのPCでも大丈夫です。
Dockerの入ったPC上での作業
Dockerイメージの作成
まずはmovidiusの環境が入ったDockerイメージを作成します。下記リポジトリのDockerfileを適当なディレクトリに入れて（今回は/path/to/movidiusとします）ビルドします。
$ cd /path/to/movidius
$ docker build -t movidius .
Dockerファイルの中身としては、OpenCVとcaffe環境、およびMovidius NCSのライブラリをインストールします。ここで重要なのは、numpyは必ずapt-getでインストールする事です。というのも、MovidiusのSDKがpython3-numpyに依存しているため、pip等でnumpyを入れてしまうと、MovidiusのSDKがインストール出来ないからです。また、次にコンパイルするネットワークはホストからも扱うので、扱いやすさのためユーザーモードを作成しておきます。
ネットワークのコンパイル
ここからは、caffeのモデルをコンパイルしていきます。コンパイル用のファイルは用意済みなので、caffeのprototxtとcaffemodelファイルを準備し、コンパイルのプログラムを実行するだけとなります。今回は既存のモデル(GoogLeNetとAlexNet)をコンパイルするだけですが、ここで好きなファイルをコンパイルすることも勿論できます。
まずは、先程作ったDockerイメージを立ち上げます。なお、後でコンパイルしたモデルをラズパイに送るため、ホスト上の適当なフォルダ（ここでは/path/to/data）を共有フォルダにしておきます。下記のように立ち上げることで、Docker内で/home/ubuntu/dataにデータを保存しておけばホストでもそのデータを扱うことができます。
docker run -it --rm -v /path/to/data:/home/ubuntu/data movidius:latest /bin/bash
ここからはDocker内での作業となります。まずは、ネットからcaffeのモデルをダウンロードしましょう。
mkdir -p data/AlexNet && cd data/AlexNet
wget http://dl.caffe.berkeleyvision.org/bvlc_alexnet.caffemodel
wget https://raw.githubusercontent.com/BVLC/caffe/master/models/bvlc_alexnet/deploy.prototxt
mkdir -p data/GoogLeNet && cd data/GoogLeNet
wget http://dl.caffe.berkeleyvision.org/bvlc_googlenet.caffemodel
wget https://raw.githubusercontent.com/BVLC/caffe/master/models/bvlc_googlenet/deploy.prototxt
また、両方のdeploy.prototxtの最初を修正し、入力画像枚数を1に変更しておきます。
- input_param { shape: { dim: 10 dim: 3 dim: 224 dim: 224 } }
+ input_param { shape: { dim: 1 dim: 3 dim: 224 dim: 224 } }
続いてコンパイルです。ラズパイ上では起きていたメモリエラーがPCで実行することで消えました。
cd data/AlexNet
python3 ../../bin/mvNCCompile.pyc ./deploy.prototxt -w ./bvlc_alexnet.caffemodel -o graph
cd data/GoogLeNet
python3 ../../bin/mvNCCompile.pyc ./deploy.prototxt -w ./bvlc_googlenet.caffemodel -o graph
これで作成された両方のgraphファイルがMovidius NCSで利用されます。
ラズパイ上での作業
まずは、ラズパイ上に環境を構築します。具体的な構築手順は前回の記事と同様にsetup.shを実施すれば良いです。setup.shの内容は上記で説明したとおりなので、ここでは説明は省略します。
はじめに、先程作成したネットワークをコピーします。コピーのみホストマシンから行います。
$ scp /path/to/GoogLeNet/graph ubuntu@ubuntu.local:~/ncapi/network/GoogLeNet/
続いて、ラズパイ上にsshで入り、前回同様サンプルをビルドします。
$ ssh ubuntu@ubuntu.local
$ cd ncapi/c_examples/
$ make
実行します。
./ncs-fullcheck -c1 ../networks/GoogLeNet ../images/cat.jpg
ubuntu@ubuntu:~/ncapi/c_examples$ ./ncs-fullcheck -c1 ../networks/GoogLeNet ../images/cat.jpg
OpenDevice 1.5 succeeded
Graph allocated
Persian cat (46.17%) Egyptian cat (17.80%) tabby, tabby cat (7.54%) lynx, catamount (7.19%) Arctic fox, white fox, Alopex lagopus (5.78%)
...
AlexNetについても同じ操作方法で動かすことができます。サンプルの詳細は次回以降に見ていきます。