LoginSignup
4
0

More than 1 year has passed since last update.

この子は誰?選手の名前を教えてくれるアプリ開発

Posted at

こんにちは!
テレビなどを見ていて、「この人名前なんだっけ?」となることありませんか?
超有名人ならGoogleの画像検索で引っかかるかもしれませんが、
そうでもない(失礼ですね、すみません汗)特定の人を知りたい、顔が覚えられない、そんな時にちょっと役立つかもしれないアプリを作ったのでご紹介します。

母のためのヤンスワ検索アプリ

私と母親は数年前からプロ野球のヤクルトスワローズのファンです。
しかし母は名前を覚えるのが苦手で、中継を見ていてもよく「〇〇番は何て選手?」などと聞かれます。
その都度答えますが、私がいない時でも楽しめるようになんかいい方法ないかなーと思っていたら、
おもしろそうなものがありました!
今回は今注目の、ヤクルトスワローズ期待の若手たち、ヤングスワローズ、略してヤンスワ!
のお顔を認識すると名前を教えてくれるアプリ作りに挑戦しました!

1. 使用したい画像を用意する

現地観戦に行っていいカメラで写真を撮るタイプのファンではないので、今回は画像検索の力を借りました。
そしてやり方はまるまるこちらを参照しました。

https://qiita.com/ka0ru19/items/64bfee2c7e904b9524d2

これによりダウンロードした画像をアップロードして学習させていきます。

2. Teachable Machineでモデルを作成し、Webアプリへ

「Teachable Machine」で検索するとやり方を教えてくれるページはいくつかあったので、モデル作成の方法はここでは割愛します。
今回はスマートフォンで使えるようにしたかったので、Javascriptではなく(2022年9月現在iPhoneでは動かず)、p5.jsのスニペットとやらをコピーして、CodePenのHTMLの部分に貼り付けてアプリ化しました。

3. 使いやすいようにカメラの設定を変更

プログラミング知識ゼロのため、この部分に苦戦しました。
通常、端末がなんであれ、内側(自分側)のカメラに設定されているのですが、
facingMode: { exact: "environment" }
という設定をしてあげると、外側のカメラが動くようになるそうです。

実際のコード

変更前
video = createCapture(VIDEO);
変更後
 video = createCapture
    ({audio: false, video:{facingMode: { exact: "environment" }}});

次に、背面カメラが使えるようになったものの、画像が反転してしまうという問題が発生しました。
videoflippedVideoをきちんと設定すればうまくできるのでしょうが、私は色々変えてみたものの、反転させないようにすることができませんでした。。。
時間ある時に再チャレンジしようと思います。

4. 作ったモデルを共有する

CodePenのURLを共有すれば誰でも使えるようになります。
今回はGoogleChromeの機能を使ってQRコードも作りました。
一応載せておきます、一応、、

5. おわりに

いざ、使ってみよう!と、選手の顔写真にかざしてみましたが、、、
判定率はいまひとつ、というかかなり外してる(涙)
Teachable Machineの現状の精度では顔の識別まではできないのかもしれません。
母を喜ばせることができず残念、
しかし、機械学習モデルなので、勉強させ続ければいつかは正解するかも!
ということで、こちらも時間がある時に再挑戦します。

そして本当の本当は劇団四季の俳優さんたちを教えてくれるものを作りたかったのですが、画像データが少なく学習が十分にできないこと、そもそも私がそんなに名前を知らないことから断念しました。
公式で作ってくれたら喜ぶ人結構いそうな気がしますが。

以上、身近なちょっとしたことに使えるおもしろそうな技術を紹介しました。
これからもいろいろなものづくりにチャレンジしていきたいです。
読んでいただきありがとうございました。

4
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
4
0