急にメタバースに興味を持ち、３Dアバタを作ってみたいと思いました。Vroid Studioを使ってかわいいアバタをつくれて満足したのは束の間、画像から自動でかわいいアバタができないか。と興味がでてきました。検索していたところ、FaceBuilderというものがあるようで、さっそく試してみました。
１．FaceBuilderでの実験結果
FaceBuilderは、写真に基づいて人間の顔と頭を3Dモデリングするための Blender のアドオンです。FaceBuilderを使用すると、経験豊富な3Dモデラーでなくても、きれいなトポロジで高品質の3Dモデルを作成できます。まず、人物の写真をさまざまな角度から数枚取得し、それぞれにモデルを配置して頭または顔のモデルを作成します。3Dモデルは後で Blender でスカルプト、アニメーション、トラッキングなどに使用したり、ファイルにエクスポートして他の 3D ソフトウェアにインポートしたりできます。（引用元）
ということで、「人物の写真をさまざまな角度から数枚取得し」ということで複数枚あったほうがよいのだとは思いますが、今回は１枚の画像だけで試してみました。
こちらが結果です。
| 写真 | アニメ | BitMoji | |
|---|---|---|---|
| 元画像 |  |
 |
 |
| 自動Align |  |
 |
 |
| ３Dモデル |  |
 |
 |
リアルに近い顔だと「Align」がうまく機能し、ほとんど修正せずにモデルを作れました。自動Alignがかなりずれているアニメでも手動で修正をすればそこそこの３Dモデルができました（かわいさはまだまだですが）。
２．試した手順について
以下、Windows環境にて試した手順です。興味のある方は試してみてください（すごく簡単です）。
2.1 Blenderをインストール
Blenderをダウンロード （「Download Blender」をクリック）。ダウンロードが終わったらインストーラを起動して、任意の場所にインストール（デフォルトは C:\Program Files\Blender Foundation\Blender 3.4\ )。
2.2 FaceBuilderをセットアップ
FaceBuilderをダウンロード（「Download FaceBuilder add-on」をクリック）。無事にZIPファイルをダウンロードできたら、Blenderのメニュー［編集］から［プリファレンス］を選択します。[アドオン]セクションから、画面右上隅のInstall…ボタンからZIP ファイルを選択し、アドオンをインストールします。
つづいてコアライブラリをインストールします。[アドオン]セクションから、［FaceBuilder］を選択し、画面下の［Install online］をクリックします。これでインストールは完了です。
2.3 FaceBuilderの使い方
メニュー［FaceBuilder］を開き［Create a new head］を選択。「Add Images」をクリックして、３Dモデル化したい画像を選択して［Open Images］（今回は１枚でトライしてますが、複数枚も一度に選択可能なようです）。Openした画像を選択して［Align face］を選択。メッシュ情報を更新して、[Create texture]をクリック（確認画面があがるので［OK］をクリックすると実行）。※画像が１枚だけのため、「Expand edges」という写真を引き伸ばして補間してくれる機能を使いました。
まとめ
今回は、FaceBuilderを使って手動で画像からの合成を試みてみました。ここからアバタ―として作り上げるのとあわせて、コマンドラインでの自動化を目指していきたいなぁという思いです。ぜひ、そのへんの知識ある方、アドバイスなどいただけるとうれしいです。なお、facebuilderが無料で使えるには日数制限があるようです。かわいいアバタが欲しい。
参考