概要

OpenCVのtrackingを使用して物体の追跡を行う

環境

Windows 10(64Bit)
OpenCV3.1
CMake 3.6.1(64Bit)
Visual Studio 2015

対象

Visual StudioでC(++)の実行環境を構築出来る
PATHの設定が出来る

記事を読んで出来る事

OpenCVのVisual Studio向けビルド環境構築
動画の1フレーム目を利用して追跡対象の物体を選択し、その後追跡中にモザイクをかけるプログラムの実行

発展させるとしたら

AviUtlのプラグイン作成
スマホからの動画編集アプリ

注意

公開するプログラムは最小単位なのでエラー等は考慮しないものとする
ファイルを取得し展開する必要のあるものは全て『c:\』へ展開したものとして記載する
パスを通す手順は記載を省くので各自対応しているものとする

手順

OpenCVの取得

https://github.com/opencv/opencv/releases からOpenCV 3.1を取得し任意の場所に展開する

contribの取得

https://github.com/opencv/opencv_contrib より、cloneするか、zipでファイルを取得し任意の場所に展開する

contribビルド

Visual Studio 2015向けビルド環境構築

Visual Studioのソリューションファイル生成

CMakeを起動し以下の設定を行う

設定内容	値
Where is the source code	C:/opencv/sources
Where to build the binaries	C:/opencv/build

入力後、「Configure」する

設定内容	値
Specify the generator for this project	Visual Studio 14 2015
Radio Button	Use default native compilers

更に以下のオプション設定を行う

Name	Value
OPENCV_EXTRA_MODULES_PATH	c:/opencv_contrib-master/modules

入力後再度、「Configure」する
エラーが出ていなければ続いて「Generate」する

Visual Studioからcontribビルド

C:\opencv\build\OpenCV.slnを実行し、Debug・Release共にビルドする

実装

Visual Studioのソリューションを作成する

アプリケーション設定

設定	値
アプリケーションの種類	Windows アプリケーション
追加オプション	空のプロジェクト

コンソールでも問題ないと思うが拡張する上でファイルの読み込みやUI設計する可能性があるのでこうした

main.cpp

#include <opencv2\opencv.hpp>
#include <opencv2\video.hpp>
#include <opencv2\tracking.hpp>
#include <opencv2\highgui.hpp>
#include <opencv2\imgproc.hpp>
#include <Windows.h>

#pragma comment(lib, "opencv_core310.lib")
#pragma comment(lib, "opencv_videoio310.lib")
#pragma comment(lib, "opencv_tracking310.lib")
#pragma comment(lib, "opencv_highgui310.lib")
#pragma comment(lib, "opencv_imgproc310.lib")

int WINAPI WinMain(
    HINSTANCE hInstance,
    HINSTANCE hPrevInstance,
    LPSTR lpCmdLine,
    int nCmdShow
)
{
    cv::VideoCapture cap(『任意の動画ファイルを指定』);
    if (!cap.isOpened()) return 0;

    cv::Mat frame;
    cap >> frame;
    cv::Rect2d roi = cv::selectROI("Target", frame);

    cv::Ptr<cv::Tracker> tracker = cv::Tracker::create("MIL");
    tracker->init(frame, roi);

    for (;;)
    {
            // 切り出してモザイクかけてもどす.
            // 倍率は20
            cv::Mat mosaic(frame, roi);
            cv::resize(mosaic, mosaic, cv::Size(), 0.05, 0.05);
            cv::resize(mosaic, mosaic, cv::Size(), 20, 20, cv::INTER_NEAREST);
            cv::Mat mat = (cv::Mat_<double>(2, 3) << 1.0, 0.0, roi.x, 0.0, 1.0, roi.y);
            cv::warpAffine(mosaic, frame, mat, frame.size(), CV_INTER_LINEAR, cv::BORDER_TRANSPARENT);
            cv::imshow("Tracking", frame);

            if (cv::waitKey(1) == 0x1B) break;

            cap >> frame;
            if (frame.empty()) break;
            tracker->update(frame, roi);
    }

    cv::destroyAllWindows();
    return 0;
}

実施している事

動画の読み込み
1フレーム目から追跡対象特定(マウスで枠を作成し、Enterキーで確定)
1フレームづつ追跡対象にモザイクをかけ画像を合成し表示
最終フレームまたはEscキー入力で終了

OpenCVで物体追跡し、対象にモザイクをかけ続ける(動画)

概要

環境

対象