はじめに

本文章はRealityCaptureを利用してフォトグラメトリを利用したい人向けに、フィギュアをiPhoneで撮影してモデル化しUnityで見てみるまでのステップをお伝えするものです。

本記事を読む前に権利周りに注意してください

フォトグラメトリを悪用してはいけません

著作物を立体化したフィギュアは著作権者に版権料を支払って創作されたものです。キャプチャしたモデルを眺めて自分で楽しむくらいならグレーですが、そのモデルを使ってゲームを作って売るとか、あまつさえ3Dプリンターで出力して海賊版フィギュア作るとかは絶対ダメです。折角の良い技術を悪用するのはやめましょう。

教えてGooアンサー見解での
https://oshiete.goo.ne.jp/qa/8248786.html

「昭和53年の最高裁判例で「著作物の複製とは、既存の著作物に依拠し、その内容及び形式を覚知させるに足るものを再製すること」と規定されました。つまり、類似性だけで複製と認められる可能性があるということで、3Dプリンターや3Dスキャナーで得たデータを私的に使用する範囲を越えて配布すると侵害となるでしょう。販売すると差止請求と損害賠償請求の対象でしょう。単純に考えて他人の知的財産であることに違いありません。」

というご意見はご尤もですので私用に留めましょう。

本記事を書くのは許容されるのか？

艦これ二次創作ガイドラインまとめを根拠とし本記事は同人活動の一環として行うものであるため許容されるものであると判断して投稿しております。

許されると思う！多分！！

RealityCaptureとは

フォトグラメトリ技術により複数の写真を元に3D形状を復元するソフトウェアです。詳細は専門の方のブログにお任せします。

お値段は

公式サイトのお品書きは以下になります。

一番下でも3ヶ月で1万円...これは手が出にくい...
一応フリー版もあります。

キャプチャして眺めるだけならフリー版でもいいです。ただしやっぱりモデルデータは出力したいものです。そこでSteam版を利用します。

一ヶ月だけのサブスクリプションならばだいぶハードルが下がるのでこれを使います。
それではいざ鹵獲開始です。

撮影

フォトグラメトリのメインである撮影作業を行います。曇りの日に屋外でそれなりの大きさのものを撮影するのがフォトグラメトリのベストコンディションらしいですが、今回は屋内で屋内照明を頼りに小さなフィギュアを撮影するので一手間加えます。

下準備

フォトグラメトリは撮影背景の特徴点を元に撮影位置や姿勢を推定してモデルを生成します。逆に言えば特徴点がはっきりしていなかったり光源などが変化してしまうとモデル生成が困難になります。

そこでこのような魔法陣を地面に書き込みます。画像認識しやすそうなマーカーを描いて見ました。床に直接書き込むと大変なことになるので、100均で買ったフローリングタイルに書き込んで見ました。

注意点まとめ

なるべくなら屋外などの広い空間で撮影する
光源が変化することや表面が明るくなりすぎるためフラッシュはたかない
屋内で撮影するなら一工夫する

撮影

フィギュアを愛でながらいろんな方向から撮りましょう。ただし、カメラを傾けたりはしないほうがいいようです。可愛いからと行ってフラッシュをたいたりはしないほうがいいです。

こういうのダメ。

だいたい100枚くらい取るといいみたいです。

ちなみに風呂場で撮りました。白壁でいい感じにレフ板代わりになってくれました。こんな貧乏環境でも出来てしまうのがフォトグラメトリの凄さです。

　モデリング

環境

Windows 10 Pro
Intel Core i5-7400
RAM 8GB
GPU Geforce gtx 1060

写真取り込み

まずはRealityCaptureを立ち上げます。

写真を複数選択してRealityCaptureにドラッグ＆ドロップします。

モデル計算

全部よみこまれたら「Start」ボタンをぽちっと押します

だいたい10~30分くらいまちます。この時CPU&GPUをフルに使用し、キャッシュのためにストレージも利用します。ドライブ容量に余裕のある状態にしてゆっくりお茶でも飲みながら放置しましょう。お母さんがクッキー焼いてるのをじっくり待つ気持ちです

できたあああああああああ

調整

ただ、今回は全面しか撮影してなかったので後ろは出来てません。上手く焼けるまで何回か繰り返すのもいいですが今回はこのままいきます。なんか全面きれいにできたモデルを載せるのやっぱり怖い。。

データとして地面が回転していたり、フィギュア以外のデータも含まれているためトリムなどの調整をかけます。「RECONSTRUCTION」タブの「DefineGroundPlane」を選択します。モデル全体を回転できるようになりますので床のグリッドと平行になるように調整します。

次に「Set Reconstruction Region」をクリックします。モデルのまわりにBOXが表示されます。この周りにある赤、青、緑の球をドラッグしてBOXの大きさを調整し、BOXが欲しい部分を覆うように調整します。

調整できたら左上のキューブアイコン「Normal Detail」をクリックして再度モデル計算させます。1回目よりはすぐに終わるのでじっくり待ちます。

テクスチャリング

1度目の計算では自動的にテクスチャリングまでおこなわれますが、再計算するとテクスチャが剥がれてしまいます。そこで手動でテクスチャリングをおこないます

といっても左上にある「Texture」ボタンをおすだけです。

無事に彩色できました。

エクスポート

とりあえずこれで完成ということで出力します。右上のExportにある「Mesh」をクリックします。ダイアログが表示されるので、形式を「fbx」 Texture Settingsの中のExport textureを「True」にします。

　完成

Exportしてできたfbxとtexture(デフォルトだとpng)をUnityにとりこみます。
若干暗めになっているかとおもいますのでライトを調整します。

ヲ級の鹵獲成功です！

マニュアルとかないの？

ほとんどないのが現状です。ただしアプリケーション内である程度のヘルプをみることはできます。
右上のApplicationの「settings」を選択します。左下にSettingsウィンドウが表示されるので、その中の「Tutorial Mode」をTrueにします。メニューなどを選択するたびにHelpが表示されるうざいモードにきりかわるので気になるボタンなどがあった場合はこれでヘルプを確認します。

この後は

表面が凸凹していたり、そもそも頂点数が30000くらいあったりとちょっとデータとしてしんどい感じですのでSculptrisでお肌をととのえたり、Blenderでリダクションやテクスチャのリマップをしてあげましょう。もしかしたらその手順も掲載するかもしれません。

空母ヲ級をRealityCaptureで鹵獲(キャプチャ)してUnityで表示する-RealityCaptureの基本的な使い方-