環境

windows 11
anaconda 23.7.4
Python 3.12.3
numpy 1.26.4

ツリー構造

├─apps
├─checkpoints　今回のモデルファイルを配置
├─data
├─lib
├─sample_images
├───test.png 3Dにしたい写真の画像を配置
└─scripts

git clone https://github.com/facebookresearch/pifuhd.git
cd pifuhd
conda create -n pifuhd
conda activate pifuhd

pip install -r requirements.txt
pip install matplotlib
pip install -U numpy

リンクをクリックするとダウンロードがはじまります
https://dl.fbaipublicfiles.com/pifuhd/checkpoints/pifuhd.pt

numpyのアプデで下記ファイルにエラーが出るので対応する
※現在、開発が止まっておりnumpyのダウングレードがうまくできなかったので、修正して対応しました
◆ pifuhd\lib\sdf.py
「np.bool」→「bool」に一括置換

◆ pifuhd\lib\data\EvalWPoseDataset.py
「np.int」→「int」に一括置換

pifuhd\sample_images\test.png

今回はMicrosoft copilotに生成してもらった画像を使用

conda activate pifuhd
python -m apps.simple_test

作成には1,2分ほど掛かります(画像サイズやスペックによります)

下記に作成されます

\pifuhd\results\pifuhd_final\recon

他にもblenderなどでも確認可能です

Projectに保存して

Hierarchyに配置

思ったより簡単に写真から3Dのモデルが生成されました
ただ、人物が対象で立ち姿じゃないとうまく生成されませんでした。
イラストも立体的じゃないものはうまくいなかなかったり。
色々試して建造物の生成もうまくできるか検証したいと思います