手話ってむずかしそう！
手話と聞いてみなさんはどんなイメージをもっているでしょうか？私はテレビで見るたびに「複雑だし、めっちゃ早い！」と思って見ており、筆談という手段もあるけどお互いに文字を書くのもけっこう時間がかかるかも…と思いました。今の世の中だとスマホに文字を打ち込んで相手に見せる！というのが手っ取り早いのかもしれませんが、もし手話を使うことになるとしたら、とても慣れた方と初心者の両極端に分かれているのではないかなと想像し、そこで手話の入門として手話の表現を瞬時に文字にできたら手話の入門にぴったりで練習にもなると思い、今回のLINE Botを作ってみました！これから手話を使われる方は便利だと思うのでぜひゆっくり見ていってください～。
実際にカメラの前で手話をしてみると…
ありがとう！の手話表現➡
「ありがとう！」
使用ツールと参考にさせていただいたサイト
1.Teachable Machine（画像認識の元となる画像の取り込みを行ないます）
2.Node-RED（画像認識の仕組みを作れます）
3.Make（旧Integromat。アプリを連携できるノーコードツールです）
4.LINE Developers（LINEとサービスの連携ができます）
参考にさせていただいたもの
- 手話CG単語検索サイト（NHKさんで手話の表現をCGで表しています）
- 手話を覚えてみよう！（阿賀野市にある日常会話で使える手話を紹介するイラスト）
使い方はカンタン♪
カメラに向かって手話を表現すると、LINE Botがどういう気持ちを表しているのかを教えてくれる仕組みになっています。
ありがとう！の手話表現➡「ありがとう！」
作り方
Teachable Machineの画像を取り込んだ後の画面がこちらです。
①「Teachable Machine」のウェブカメラを押して、取り込みたい手話の表現を取り込みます。
手話は両手を使っての表現が多いので、ウェブカメラボタンを押した2秒後から画像の取り込みをスタートし、6秒間画像の取り込みを行なう設定があるのでそちらを使用しました。
その後トレーニングで画像を「Teachable Machine」にまとめて取り込みます。プレビューの「モデルをエクスポートする」を押し、アップロードを行ないます。アップロード後は共有可能なリンクが作成されるのでURLをコピーしてください。
👈以降の説明が長いのでそのほかの「Node-RED」、「Make」の詳細はこちらをクリックください。折りたたんでおります。
②「Node-RED」のワークスペース全体の画像です。
右上のハンバーガーマーク（三本線）をクリックし、パレットの管理を開きます。現在のノードからノードを追加のタブに変更してください。以下の3つのノードをコピペで追加してください。
-
node-red-contrib-teachable-machine（teachable-machineで作成したモデルを使用するためのノード） -
node-red-contrib-browser-utils（自分のPCのカメラの写真データを読み込んでくれるノード） -
node-red-contrib-image-output（読み込んだ画像をNode-RED上に表示してくれるノード）
左のパレットに「camera」、「teachable machine」、「image preview」が追加されますので、ワークスペース全体のようにノードを配置してください。
「teachable machine」ノードの中身です。先ほど①でコピーした「Teachable Machine」のURLを貼り付けしてください。
「template」ノードの中身です。
「http request」ノードの中身です。後ほどこちらに使用するURLを貼り付けします。
③「Make」全体の画像です。
「Make」の「Webhooks」の中身です。「LINE Developers」で自身のLINEと紐づけし、作成されたURLをコピーしてください。このURLを先ほどの「Node-RED」の「http request」にURLを貼り付けしてください。
「Make」の「LINE Send a Notification」の中身です。
今後の課題
先日の記事に自己紹介を軽くしたのですが、私は小売店で働いています。従業員同士で使用する先入観があったので、今回の技術をどう仕事に活かすかをあまり思いつけず今回のLINE Botを作ったのですが、お客さんに使ってもらう立場で考えるとスマホカメラで商品を見ると商品の割引期間やクーポンがわかるようにすると便利だと思いました。視野が狭かった…
良ければ前回の記事も見ていってくださいー！
前回の記事
これから
身近なスマホのカメラとの連携の仕方などを組み合わせればできる幅を広げられると思ったので、発想も視野も大事にしていきたいと思います！