23
22

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 5 years have passed since last update.

空母ヲ級をRealityCaptureで鹵獲(キャプチャ)してUnityで表示する-RealityCaptureの基本的な使い方-

Last updated at Posted at 2018-03-16

はじめに

本文章はRealityCaptureを利用してフォトグラメトリを利用したい人向けに、フィギュアをiPhoneで撮影してモデル化しUnityで見てみるまでのステップをお伝えするものです。

本記事を読む前に権利周りに注意してください

フォトグラメトリを悪用してはいけません

著作物を立体化したフィギュアは著作権者に版権料を支払って創作されたものです。キャプチャしたモデルを眺めて自分で楽しむくらいならグレーですが、そのモデルを使ってゲームを作って売るとか、あまつさえ3Dプリンターで出力して海賊版フィギュア作るとかは絶対ダメです。折角の良い技術を悪用するのはやめましょう。

教えてGooアンサー見解での
https://oshiete.goo.ne.jp/qa/8248786.html

「昭和53年の最高裁判例で「著作物の複製とは、既存の著作物に依拠し、その内容及び形式を覚知させるに足るものを再製すること」と規定されました。つまり、類似性だけで複製と認められる可能性があるということで、3Dプリンターや3Dスキャナーで得たデータを私的に使用する範囲を越えて配布すると侵害となるでしょう。販売すると差止請求と損害賠償請求の対象でしょう。単純に考えて他人の知的財産であることに違いありません。」

というご意見はご尤もですので私用に留めましょう。

本記事を書くのは許容されるのか?

今回キャプチャ対象として扱うのは「グッドスマイルカンパニー社 ミディッチュ 艦これ 空母ヲ級」です。権利表記は「©2014 DMM.com POWERCHORD STUDIO / C2 / KADOKAWA All Rights Reserved.」となります。

艦これ二次創作ガイドラインまとめを根拠とし本記事は同人活動の一環として行うものであるため許容されるものであると判断して投稿しております。

許されると思う!多分!!

RealityCaptureとは

フォトグラメトリ技術により複数の写真を元に3D形状を復元するソフトウェアです。詳細は専門の方のブログにお任せします。

スクリーンショット 2018-03-16 0.47.42.png

お値段は

公式サイトのお品書きは以下になります。

スクリーンショット 2018-03-16 0.38.14.png

一番下でも3ヶ月で1万円...これは手が出にくい...
一応フリー版もあります。

スクリーンショット 2018-03-16 0.02.28.png

キャプチャして眺めるだけならフリー版でもいいです。ただしやっぱりモデルデータは出力したいものです。そこでSteam版を利用します。

スクリーンショット 2018-03-16 0.43.42.png

スクリーンショット 2018-03-16 0.43.26.png

一ヶ月だけのサブスクリプションならばだいぶハードルが下がるのでこれを使います。
それではいざ鹵獲開始です。

撮影

フォトグラメトリのメインである撮影作業を行います。曇りの日に屋外でそれなりの大きさのものを撮影するのがフォトグラメトリのベストコンディションらしいですが、今回は屋内で屋内照明を頼りに小さなフィギュアを撮影するので一手間加えます。

下準備

フォトグラメトリは撮影背景の特徴点を元に撮影位置や姿勢を推定してモデルを生成します。逆に言えば特徴点がはっきりしていなかったり光源などが変化してしまうとモデル生成が困難になります。

IMG_0001.png

そこでこのような魔法陣を地面に書き込みます。画像認識しやすそうなマーカーを描いて見ました。床に直接書き込むと大変なことになるので、100均で買ったフローリングタイルに書き込んで見ました。

注意点まとめ

  • なるべくなら屋外などの広い空間で撮影する
  • 光源が変化することや表面が明るくなりすぎるためフラッシュはたかない
  • 屋内で撮影するなら一工夫する

撮影

フィギュアを愛でながらいろんな方向から撮りましょう。ただし、カメラを傾けたりはしないほうがいいようです。可愛いからと行ってフラッシュをたいたりはしないほうがいいです。

woq.png
こういうのダメ。

だいたい100枚くらい取るといいみたいです。

photos2.png

ちなみに風呂場で撮りました。白壁でいい感じにレフ板代わりになってくれました。こんな貧乏環境でも出来てしまうのがフォトグラメトリの凄さです。

# モデリング

環境

  • Windows 10 Pro
  • Intel Core i5-7400
  • RAM 8GB
  • GPU Geforce gtx 1060

写真取り込み

まずはRealityCaptureを立ち上げます。

スクリーンショット 2018-03-16 1.12.45.png

写真を複数選択してRealityCaptureにドラッグ&ドロップします。

スクリーンショット 2018-03-16 1.13.44.png

モデル計算

全部よみこまれたら「Start」ボタンをぽちっと押します

スクリーンショット 2018-03-16 1.14.30.png

だいたい10~30分くらいまちます。この時CPU&GPUをフルに使用し、キャッシュのためにストレージも利用します。ドライブ容量に余裕のある状態にしてゆっくりお茶でも飲みながら放置しましょう。お母さんがクッキー焼いてるのをじっくり待つ気持ちです

rendering.png

できたあああああああああ

capture.png

調整

ただ、今回は全面しか撮影してなかったので後ろは出来てません。上手く焼けるまで何回か繰り返すのもいいですが今回はこのままいきます。なんか全面きれいにできたモデルを載せるのやっぱり怖い。。

trim1.png

データとして地面が回転していたり、フィギュア以外のデータも含まれているためトリムなどの調整をかけます。「RECONSTRUCTION」タブの「DefineGroundPlane」を選択します。モデル全体を回転できるようになりますので床のグリッドと平行になるように調整します。

trim2.png

次に「Set Reconstruction Region」をクリックします。モデルのまわりにBOXが表示されます。この周りにある赤、青、緑の球をドラッグしてBOXの大きさを調整し、BOXが欲しい部分を覆うように調整します。

 trim3.png

調整できたら左上のキューブアイコン「Normal Detail」をクリックして再度モデル計算させます。1回目よりはすぐに終わるのでじっくり待ちます。
trim4.png

テクスチャリング

1度目の計算では自動的にテクスチャリングまでおこなわれますが、再計算するとテクスチャが剥がれてしまいます。そこで手動でテクスチャリングをおこないます

といっても左上にある「Texture」ボタンをおすだけです。

texture.png

無事に彩色できました。

complete.png

エクスポート

とりあえずこれで完成ということで出力します。右上のExportにある「Mesh」をクリックします。ダイアログが表示されるので、形式を「fbx」 Texture Settingsの中のExport textureを「True」にします。

export.png

# 完成

Exportしてできたfbxとtexture(デフォルトだとpng)をUnityにとりこみます。
若干暗めになっているかとおもいますのでライトを調整します。

unity.png

ヲ級の鹵獲成功です!

マニュアルとかないの?

ほとんどないのが現状です。ただしアプリケーション内である程度のヘルプをみることはできます。
右上のApplicationの「settings」を選択します。左下にSettingsウィンドウが表示されるので、その中の「Tutorial Mode」をTrueにします。メニューなどを選択するたびにHelpが表示されるうざいモードにきりかわるので気になるボタンなどがあった場合はこれでヘルプを確認します。

Tutorial.png

この後は

表面が凸凹していたり、そもそも頂点数が30000くらいあったりとちょっとデータとしてしんどい感じですのでSculptrisでお肌をととのえたり、Blenderでリダクションやテクスチャのリマップをしてあげましょう。もしかしたらその手順も掲載するかもしれません。

参考

23
22
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
23
22

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?