はじめに
M5Stack社のAIカメラ M5StickV 向けアプリ Brownie についての情報をまとめます。このページは不定期に更新されます。
現在、下記の3種類がありますが、区別したい時を除き、まとめて Brownie と呼んでいます。
- Brownie
- 物体検出アルゴリズム Tiny YOLO v2 を利用して顔認識と各種物体認識(20種類)を行います。大きなボタンを押すとその物体の名前を読み上げます。
- Brownie に説明とアプリがあります。
- Brownie 1000
- 物体識別アルゴリズム MobileNet v1 を利用して1000種類の物体を見分けます。 大きなボタンを押すとその物体の名前を読み上げまず。
- ここ以下のファイルをmicroSDカードにコピーしてM5StickVに入れて実行してください
- Brownie Learn
- 転移学習という手法を利用して、認識したい物体を自分で追加することができるアプリです。学習処理も M5StickV 本体内で行っています。QRコードを利用して簡単に学習しなおすことができます。
- ここ以下のファイルをmicroSDカードにコピーしてM5StickVに入れて実行してください。現在ファームウェアとして v0.5.0 が必要です。
また、Brownie Learn 向けに外部のアプリと連携するためのツール Brownie Monitor を用意しています。物体認識をすると、QRコードに書かれた文字列に紐づけられた物体の名前がシリアルポート経由で送られてきます。その文字列をトリガーにしてアプリケーションを起動することができます。Windows デスクトップアプリと Node.js (Mac, Linux, Windowsなどで動きます)があります。
-
Windowsバイナリ
- Maker Faire Taipei 2019 Kit に含まれています
-
Node.js
- Brownie Monitor for Node.js (GitHub)
関連ドキュメント
- M5StickVではじめる軽量モデルの実世界への応用 #TFUG (SlideShare)
- 3000円の液晶付きAIカメラでオフライン転移学習する #M5StickV (Qiita)
- Brownie - Automate Your Home with AI (Hackster)