DJI と Intel が技術提供をしたことで話題のトイドローン Tello を Google Home を使って音声で制御できるようにしてみました。
「離陸して」
とか
「時計回りに10°回転して」
とか、こんな感じで音声で Tello を制御できます。
Tello を手のひらに置いて「離陸して」で離陸させて、「着陸して」で手のひらに着陸させれば間違いなくドヤ顔できます！
必要なもの
- Tello
- Raspberry Pi
- Node 6以上
- Wifiカード x 2
- ngrok
- Dialogflow アカウント
- Google Home または Google Assistant アプリ
仕組み
仕組みを解説すると以下のような感じです。
- Raspberry Pi をインターネットと Tello それぞれに接続。このために2つの Wifi カードが必要です。
- Raspberry Pi 内では Node で作った Webhook 用のエンドポイントが常駐。
ngrokで外部からの接続を許可する。 - Dialogflow でエージェントを作って、「離陸して」などの命令をインテントとして定義。
- インテントが発火したら Webhook を蹴っ飛ばして、そこから Tello に UDP でメッセージを送信。
正直めんどくさかったです。ｗ
実装方法
Raspberry Pi に必要なソフトをインストール
- Node 6.x 以上
- ngrok
- Wifi カード x 2
以上を必死こいて構築してください。
Webhook 用のスクリプトをセットアップ
ソースは以下です。
手順がめんどくさくて説明するのもめんどくさいのでソースを読んでください。笑
このあたりがミソで、ここで Tello に送るメッセージをごにょごにょしています。
起動するには以下のような感じです。
$ node index.js
$ ngrok http 8080
PC の Wifi を Tello につなぐと以下のような curl コマンドで制御することも可能です。
$ curl http://localhost:8080/ -X POST -H 'Content-Type:application/json' -d "$(cat test/post.json)"
post.json の中身は以下のような感じ。
{
"queryResult": {
"intent": {
"displayName": "up"
}
}
}
Dialogflow でエージェントを作成
エクスポートしたデータを、上述の GitHub リポジトリにコミットしておきました。
.zip で固めてインポートできます。
感想
まず、タコ糸とか釣り糸は必須です。あと外では試さないようにしましょう。ｗ
プロペラが２，３枚なくなることを覚悟してください！
- 飛ばしてる最中に「テスト用アプリから応答がありません」って自体に陥ると天井に張り付いたままバッテリーが切れて落ちてくるのを待つことになります。。。なぜかフルパワーでプロペラがまわりはじめることもあって、この場合かなり激しい動きをしてくれるので外では試さないようにしましょう。
- ドローンの音がうるさくて音声が認識されないことがあります。「着陸して」を聞き取ってもらえないときはつらい。
- 「時計回りに９０°回転して」はやばい。精度が高いです。
- 「10cm下がって」の下がってをうまく聞き取れないときは、上に行きます。笑
なにかの本で Drone はラジコンヘリの進化系ではなくて、空を飛ぶスマートフォンだというようなことを読んだのですが、音声コマンドで静かに部屋の中を飛び回るドローンというのは将来あるかもしれないと思った！