プロの技術はすごいなぁ in TEPIA
Information
Regarding the English explanation, please refer to github bottom side link
変幻灯の技術を用いて自分の顔の動きをバッハにシンクロさせる
- ちょっとした技術の紹介があるものの、小さな子供には理解できず、遊び場と化してしまった。
- でも、これを気に少しでも興味を持ってくれれば
- もう少しお兄さんの超難関塾に通っていると子供はスラスラ課題をこなしていた(これは感心)
- TEPIAは予約制なので、激混みにならないみたいです(特に平日)
- Scratchもロクにこなさなかった息子はかなり苦労して、幼児用ロボット動かしていました(汗)
大きい子供に似たようなものをつくってとせがまれる
途中経過
- 現在は他人の顔の位置と自分のリアルタイムの位置合わせまでです
作成工程
-
データを集める
-
ランドマークデータを集めて学習
-
実際に自分の顔とポイントが一致するかを確認
-
合成したい写真を用意する。その顔のポイントを把握
-
最後に自分の映した顔のポイントがその顔のポイントに合うようにする
インフォメーション
- 20秒程度で500枚の画像を取得するようにしてみました
- 学習の損失はなかなか下がらずにデータ量の割には時間をかけています
- これは修正ポイントですね
結果
− なんとか緑のポイントが自分の顔から超有名な新垣さんの顔に合わせてみた図
次への課題
- 表情を動かす(GANとか?)
- ノートPCで動く状態をキープ。
- まあ、すでにVtuberセットみたいなものが世にはでていますが、気にせず作成する
成果物