テンプレートマッチングを用いて画像レジストレーション
特徴点によるレジストレーションでは難しかった以下のような空と雲の画像(可視画像と赤外画像)に対してレジストレーションの方法を考えてみました.
以下githubに全コードをのせています.
githubリンク
ちなみに特徴点を用いたレジストレーションをした結果はこんな感じです.
変換後(!?)
目的
多少違う画像でも,最も似ている点をテンプレートマッチングで見つけて画像レジストレーションできないか？
手法
・2つの画像でテンプレートマッチングしそうな範囲を適当に選択(赤と青のボックス).
・赤ボックスのテンプレートと最も似ている領域青ボックスの領域から探し,2つの画像の対応する点を数点見つける.
・対応する点を使い,射影変換(もしくはアフィン変換)による画像レジストレーションを行う.
結果
対応する点は以下のようになりました.
実際に片方を青,片方を赤にして重ねてみました(これでもイマイチわかりにくい...).
かなり傾いていてもともとズレが結構あったことがわかります.
おわり
特徴点によるレジストレーションでは全く上手く行かなかったのですが,この手法でかなり改善されました.
なにか使えないかな.