Help us understand the problem. What is going on with this article?

Azure Computer Vision APIを用いたアダルトスコアを元に、8万冊以上のマンガの表紙をソート出来るようにしてみた話

More than 1 year has passed since last update.

はじめまして

皆さん、こんにちは。Qitta2回目の投稿、松井 敏と申します(以前は@moririringという名前で活動してました)。現在僕は、読んだマンガを登録するサイト「マンガ読んだ!!」を作っています。マンガ読んだ!!は、「読んだボタン」を押すだけで簡単に読んだマンガを記録できるサービスで、最近β版にしました。

マンガ読んだ!!

以前に本を登録するサービスを使ったことがありますが、自分で1冊ずつ登録していく必要がありました。それはとても面倒で、1000冊読んでいれば、1000回登録が必要でした。マンガ読んだ!!は ボタンを押すだけで登録できます。しかも作者やシリーズでまとめて登録も簡単です!マンガの数は現在、集英社、講談社、小学館などから8万冊以上。毎日増え続けています。

Azure Computer Vision API

さて、Azure Computer Vision API(以下Vision API)というサービスがあります。ある時、このキーワードを知って、サイトを見てみました。すると以下のような説明がありました。

タグ付け、説明、ドメイン固有モデルを使用してコンテンツを特定し、確実にラベル付けします。成人向け/わいせつな描写に対する設定を適用すれば、アダルト コンテンツの自動制限を有効にできます。画像の種類や写真内の配色を特定します。

これだ!と思いました。実はマンガ読んだ!!でやりたいことありました。それは、表紙画像のチェックです。

マンガの表紙チェック

マンガ読んだ!!ではマンガを表紙で表示しています。表紙は、書店で並べられているぐらいなので、基本全年齢OKです。(適切じゃない表紙で回収騒ぎになった作品もありますけどね!)しかし、これ本当に青少年に見せて良いんだろうか?という表紙は結構あります。そこにVision APIです!サイト上で画像のURLを送信すればチェック出来るのでいくつか試してみました。

Vision APIの表紙チェック

例えばラブコメの王道はもちろん、成人向けコンテンツfalseです。


もう少し際どいラブコメの王道も、falseです。


水着は結構いけるのか、これもfalse。


でも、艶々先生はやっぱり成人向けコンテンツtrue。


表紙チェックとしての精度、結構悪くなさげです!

プログラムからVision APIで表紙チェック

とはいえ、手作業で一つずつ確認するのは面倒です。面倒なことはもちろんプログラムです。サイトにAPIの使い方が書いてあります。下記のプログラムを実行すればapiResultに結果が返ってきます。

const string uriBase = "https://westcentralus.api.cognitive.microsoft.com/vision/v1.0/analyze";
const string dataUrl = "http://www.s-manga.net/common/thumb/512/4-08-872571-9.jpg";
const string subscriptionKey = "13hc77781f7e4b19b5fcdd72a8df7156";
using (var httpClient = new HttpClient())
{
    var content = (await httpClient.GetAsync(dataUrl, HttpCompletionOption.ResponseHeadersRead)).Content;
    httpClient.DefaultRequestHeaders.Add("Ocp-Apim-Subscription-Key", subscriptionKey);
    var apiResult = await (await httpClient.PostAsync(uriBase, content)).Content.ReadAsStringAsync();
}

APIは5000トランザクションまでは無料で使えます。というわけでマンガ読んだで使っている表紙画像にAPIをかけてみました。(※表紙画像を使うことは集英社などに問題ない旨確認済みです)。

isAdultContent と adultScore

実際にAPIを叩くと、以下のようなJSONが返ってきます、

 {"adult":{"isAdultContent":false,"adultScore":0.038640901446342468,"isRacyContent":false,"racyScore":0.0293082557618618},"requestId":"ec898276-690d-42d3-a9f0-dfd14132f66b","metadata":{"height":1000,"width":636,"format":"Png"}}

なので以下のクラスを定義して受けます。

public class Adult
{
    public bool isAdultContent { get; set; }
    public float adultScore { get; set; }
    public bool isRacyContent { get; set; }
    public float racyScore { get; set; }
}

isAdultContent でアダルト判定できるだけでなくて、adultScore でアダルトスコア(※以下アダルトは大人と記述)も取得出来ます。集まってきた数千件のデータをみていて、思いついちゃいました。スコアは数値です。数値という事はソートが出来ます!そう、表紙機能の大人スコアソートです。実際に大人ソートしてみて色々面白いことが分かりました。

大人ソート

確かに大人ソートの上位を見てみると、いわゆる大人スコアが高いそれっぽい表紙が並びます。ところが、ノイズが結構あります。

例えば、この表紙はトップレベルで高い大人スコアを誇っていますが、それ程でもありません。


また、この表紙も相当な大人スコアです。やっぱり猫は大人ですよね。


特にインパクトが強かったのはこれでしょうか。やっぱり裸の表紙は大人スコア高めですね。


成人向け判定はfalseだけど、大人スコアが高かったのが例えばこれです。確かにすれすれな感じですよね!


まあ、ぶっちゃけ、大人スコアが高いのはイコール肌色率が大きな要因のようです。

Vision API時間制限

Vision APIで躓いたポイントも少し書きます。プログラムで大量のチェックを走らせる時、ローカルでテストしていた時は問題なかったのですが、Azure WebJobsから叩いたら必ず一定数やるとエラーが返ってきました。ログを見ると時間制限があるようで、短期間に連続で呼ぶと駄目なようです。1秒程度間隔を空ければ大体問題ないと思います。数が多いので非同期使いたかったんですけどね。。

Vision APIトランザクションの扱い

もう一つドはまりしました。Vision APIは¥112/1,000トランザクションです。8万件やろうとすると大体1万円ぐらいです。無料枠は当然使い切って、有料枠で使い始めたのですが、トランザクションの扱いを完全に勘違いしていました。URLで1回問い合わせることを1トランザクションかと思ったら1パラメータ1トランザクションでした。2パラメータ指定して取得していたので単純に倍使ってました。これは課金的に本当に痛かった。。

Vision APIのエラー処理

あとは、APIの基本だと思いますが、やっぱりちょくちょくエラーも返ってきます。最初はエラーがあったら止める、安定運用になったらスルーが良いと思います。最初の頃はエラーなら止めていたので、Bad Request、Rate limit is exceeded、InvalidImageFormatなどが来ました。日々更新はadultScoreがなかったらスルーにしています。

まとめ

そんなこんなでマンガ読んだ!!の8万件を超す表紙データにすべてに大人スコアがつけました。これで一覧での大人ソートは勿論、出版社や作者でも大人ソートできます。手塚治虫のマンガを大人順で並べたり、キン肉マンを大人順で並べたりするのも面白いと思います!ちなみにこの機能は登録ユーザー限定です。是非登録して、大人順でマンガ一覧を見てください!

Why not register and get more from Qiita?
  1. We will deliver articles that match you
    By following users and tags, you can catch up information on technical fields that you are interested in as a whole
  2. you can read useful information later efficiently
    By "stocking" the articles you like, you can search right away
Comments
No comments
Sign up for free and join this conversation.
If you already have a Qiita account
Why do not you register as a user and use Qiita more conveniently?
You need to log in to use this function. Qiita can be used more conveniently after logging in.
You seem to be reading articles frequently this month. Qiita can be used more conveniently after logging in.
  1. We will deliver articles that match you
    By following users and tags, you can catch up information on technical fields that you are interested in as a whole
  2. you can read useful information later efficiently
    By "stocking" the articles you like, you can search right away
ユーザーは見つかりませんでした