Blender2.8公式ドキュメントの目次から「Motion Tracking」の項目について意訳 & 図解してみた。
Introduction（序論）
モーショントラッキングとは、オブジェクトやムービークリップの動きを解析して特徴的な点を検出し、そのトラッキングデータを他のオブジェクトに適用することで座標を一致させる機能のこと。
モーショントラックエディタはエディタタイプのドロップダウン メニューから動画クリップエディタを選択して開く。
次にモードのドロップダウンメニューからトラッキングを選択する。
Views
トラッキングモードには3つのビューがある。トラッキングの状態をモニタリングするために使い分けることになる。
| ビュー | 用途 |
|---|---|
| クリップ | ムービークリップ編集 |
| グラフ | トラックマーカーの移動速度を視覚化 |
| ドープシート | トラックマーカーのキーフレームを視覚化 |
基本的にはクリップビューで作業するが、詳細情報をモニターしながら作業するならエディタ領域を分割して同時に視認できるように環境構築する。
画面分割した上でグラフビューなどをモニタリングすると便利。
Manual Lens Calibration（手動レンズ校正）
カメラで撮影された映像はレンズを通して投影されているため、必ず光学的に歪んだ像として記録されている。これは撮影時点で物理的に決まることなので、これについて後から変更を加えることはできない。しかし、映像をトラッキングするにはレンズの焦点距離などから歪みの強度を読み取る必要がある。
デジカメで撮影したデータであればEXIF情報から焦点距離などを自動で検出できる。ポリラインブラシでフッテージ（素材）上で直線になるラインを描画し、歪みの強度を調整してフッテージの立体感に一致させる（らしい）。より正確に調整するにはOpenCVのグリッド調整ツールを使用する。
Camera and Object Motion Solving（カメラとオブジェクトの動きの解決）
トラッキングデータを解析する目的は、後ほど合成する3Dモデルの座標を一致させてあたかも同じ空間に存在するかのように仕上げるため。トラッキングは3D空間上の座標で行うが、撮影時のカメラ設定のメタ情報のないムービークリップなどでは画面上の映像の動きから空間を推測する必要がある。空間を推測するにはムービークリップを平面上の動き
Tools for Scene Orientation and Stabilization（シーンの向きと安定化のためのツール）
解析したトラッキングデータは、合成するために3D空間上での座標を定義しなくてはならない。また、トラッキングにより座標をコントロールできるようになったため、必要なら手ブレ補正のために2Dスタビライゼーションを適用したりできる。
Clip View（クリップビュー）
Introduction（クリップビューの序論）
モーショントラッキングのほとんどの機能はクリップビューに集中している。
Marker Display（マーカー表示）
Pattern
Serch
Path
Show Disabled（無効を表示）alt + d
Info
3Dマーカー
薄いディスプレイ
Graph View（グラフビュー）
Introduction（グラフビューの序論）
グラフビューは各フレームでのトラッカーの移動速度を示す。垢のグラフは水平方向、緑のグラフは垂直方向を示す。
トラッキング解析の実行手順は、まずムービークリップを読み込んだクリップビューで解析開始フレームに移動した状態にする。
シーンフレームを設定を押して現在フレームを解析開始フレームに設定
プリフェッチを押してムービークリップをRAMに読み込むトラックのうち現在フレーム以降を解析するアイコン
またはショートカットキー（cmd + t）を選ぶ。このときクリップビューのトップバーに表示されるSolve errorの数値が低いほど精度が高く、大体3以下程度であれば十分と言える（限りなく0に近づけるよう手間をかけていく）。
するとグラフビューに解析結果のグラフが描画される
解析タブの
カメラモーションの解析を実行すると青いグラフが現れ、これはフレームごとの平均誤差を示す。青いグラフはCamera Solveの完了後のみ表示され、グラフを直接編集することはできない。グラフの振れ幅が大きい点は不正確なトラッキングを行っている可能性が高い。
グラフビューを見ながら振れ幅の大きいトラックマーカーはノイズになる可能性があるので、不要と判断できればそのトラックマーカーを削除しておいた方がいい。マーカーの削除はクリップビューで行う。
大体この流れがグラフビューの活用法。
選択項目を表示（マウスカーソルアイコン）
非表示（ゴーストアイコン）
フィルタ
- フレーム
- モーション
- エラー
Usage（使い方）
グラフは、特定フレームのトラッカーが平均値からどれだけ外れているかを確認するのに役立つ。曲線が急上昇する場合、通常はトラッキングエラーを意味する。不要なトラックマーカーはこのときに編集しておく。
これでグラフビューでトラックマーカーの調整まで終わった段階となっているはず。次はこのトラッキングデータを他のオブジェクトに適用する準備をする必要がある。
- クリップビューなどで
aを押して全てのトラックマーカーを選択 - タイムラインで、トラッキングするムービークリップの最終フレームに移動
-
ctl + lを押してマーカーろロックすることで他のフッテージにも同じトラックが適用できる（ということだと思う） -
背景として設定とトラッキングシーン設定を押すと3DエディタのBGにトラッキングしたムービークリップを投影できるようになる。
- 3Dエディタで
ビュー/視点/カメラを表示するとBGに映るようになる。
クリップビュー上で被写体の床に該当するトラックマーカーを3つ以上選択して
座標系/床を押して登録するとトラックマーカーに意味付けされ、3Dオブジェクトとムービークリップのトラックマーカーの座標を自動で一致してくれる。
3Dオブジェクトのライティングやシェーディングなどを仕上げて実写映像に馴染ませれば完成。
Dope Sheet View（ドープシートビュー）
ドープシートとは、モーショントラッキングデータのキーフレームを視覚化して把握しやすくるするもの。クリップビュー上のトラックマーカーの数だけ、ドープシーとビューの項目が表示される。
シート上のキーフレームを編集するには、ドープシートビューのトップバーにあるアイコンを選択する。ただし、本来ドープシートとは視覚化のためのもので、編集する目的のものではないので注意。使いにくいのであまり意味がないと思う。
