1. 概要
- 3D Human Mesh Reconstruction(3HMR)
- 野外での単一視点のRGB画像における3HMRにおいて、カメラが人間に近づいたときに生じる胴体の歪みの問題を解決した
- PDHumanという合成データセットを提案し、このタスクに特化した2つの現実世界データセットを拡張した
2. 新規性
射影歪みの原因を分析し、人間の体の相対的な位置が歪みの主な原因であることを発見した。そこで、人間の体の密な2D歪みスケールを表現する、新しいカメラモデルと歪み画像と呼ばれる新しい2D表現を提案した。
3. 実現方法
歪みスケール特徴から距離を推定する際に、環境コンテキストの特徴ではなく歪みスケール特徴を使用する。さらに、歪みフィーチャーと画像フィーチャーを統合し、ボディメッシュを再構築する。正しい射影行列を定式化し、射影と非射影の両方の損失を使用して、人物の位置を同定する。
4. 結果
透視歪みデータセットと標準ベンチマーク(3DPW)の両方で他の最新手法を上回ることが示された。
Paper URL: https://arxiv.org/pdf/2303.13796.pdf