スマホをワイヤレスカメラとして使えるDroidCamアプリ。無料版でHD解像度接続すると、キャプション（文字）が表示されます。これをOpenCVを使って消す（画像処理でごまかす）ことにチャレンジしました

以前、DroidCamアプリをWindows上で動作するPythonアプリと接続する記事を書きました。

今回は、DroidCamのHD解像度で繋ぎます。接続自体は、上記の記事の中でも手法を記載しました。接続時のURL指定を以下のようにする、という手法です。

cap.open('http://192.168.179.3:4747/video/force/1280x720')

HD解像度版での動作はトライアル扱いで、画面上に以下のようなキャプション（字幕）が出ます

DroidCam for iOS (HD Trial)

というキャプションが出ていますね。これを画像処理で消したいと思って処理しました。

処理結果が以下です。

完全ではないですが、それなりに誤魔化せているようです

キャプションの特徴を踏まえて以下の処理を実施しました

２値化画像は反転して利用している。文字画素を黒とした方がBITWIDTH_ANDで処理しやすいため

受信画像
２値化カーネルと論理積ANDを取ることで、文字でない画素のみを残して
分子：輝度レベルの総和
分母：文字以外の画素数（２値化カーネルの白い画素数）
で置換画素のレベルを算出して置換する

・簡単な処理ですが、それなりの置換結果になっています
・１フレーム処理するのに０．５秒程度かかっています。

かなり遅いですね。早いパソコンが欲しいです。
アルゴを変えて処理が改善できるか？ということは気が向けば実施するかもしれません。

iPhone7
DroidCam:1.8.0

Mac Book Air(2013Mid)
Python:3.9.1
OpenCV:4.5.1