実例

Gemini 1.0 Pro で文学作品を扱おうとすると頻繁にブロックされます。

例えばロングフェロー訳ダンテ『神曲』地獄篇第 6 歌 27 行目が有害コンテンツとしてブロックされます。（地獄の番犬ケルベロスについての描写）

He threw it into those rapacious gullets.

Python で API によって日本語訳を試みます。

import google.generativeai as genai

genai.configure(api_key="YOUR_API_KEY")
model = genai.GenerativeModel(model_name="gemini-pro")

def translate(text):
    response = model.generate_content("Translate into Japanese:\n" + text)
    try:
        print(response.text)
    except:
        print(response.candidates)

translate("He threw it into those rapacious gullets.")

実行するたびに結果は異なりますが、ブロックされた場合は response.text で例外が発生します。

[index: 0
finish_reason: SAFETY
safety_ratings {
  category: HARM_CATEGORY_SEXUALLY_EXPLICIT
  probability: HIGH
}
safety_ratings {
  category: HARM_CATEGORY_HATE_SPEECH
  probability: NEGLIGIBLE
}
safety_ratings {
  category: HARM_CATEGORY_HARASSMENT
  probability: MEDIUM
}
safety_ratings {
  category: HARM_CATEGORY_DANGEROUS_CONTENT
  probability: NEGLIGIBLE
}
]

何度かやっていると翻訳できることもあります。

彼はそれを貪欲な口に投げ入れた。

HARM_CATEGORY_SEXUALLY_EXPLICIT に引っ掛かっていますが、特にそういう内容ではありません。恐らく rapacious が誤解されたのではないかと思います。

[意味・対訳] 強欲な、(貪欲(どんよく)で)飽くことを知らぬ、強奪する、略奪する、生き物を捕食する、肉食の

このようなブロックがかなり頻繁に発生します。安全側に倒しているということで仕方ない面もありますが、現実問題として文学作品を扱う上で支障があります。

設定

【追記 2024.5.16】現在、Block none を含む 4 段階の設定が可能です。

Google AI Studio では 3 段階の設定が可能です。しかし Block few でも先ほどのように HIGH と判定されればブロックされます。Google AI Studio ではサポートされていないようですが、

API ではブロックしない設定が可能です。

BLOCK_NONE 安全でないコンテンツの可能性に関係なく、常に表示されます。

これを適用すれば、先ほどの例もブロックされなくなります。

safety_settings = [
    {
        "category": "HARM_CATEGORY_HARASSMENT",
        "threshold": "BLOCK_NONE"
    },
    {
        "category": "HARM_CATEGORY_HATE_SPEECH",
        "threshold": "BLOCK_NONE"
    },
    {
        "category": "HARM_CATEGORY_SEXUALLY_EXPLICIT",
        "threshold": "BLOCK_NONE"
    },
    {
        "category": "HARM_CATEGORY_DANGEROUS_CONTENT",
        "threshold": "BLOCK_NONE"
    }
]
model = genai.GenerativeModel(model_name="gemini-pro", safety_settings=safety_settings)

リミッターを解除している感があります。ドキュメントに記載されているため、特に裏技ということではないはずです。

私自身はこの設定を知らずに頻繁なブロックで使い物にならないと誤解していました。

ブロックとは別の理由でエラーが発生することがあります。間隔を空けて再試行することで対処できるケースについては以下の記事を参照してください。

Bard

API と違って Bard ではこのような回避ができないため、作業に使っていると理由を示さずに回答を拒否することが割と頻繁に発生します。

今までその理由がよく分からなかったのですが、API の挙動と比較することで、Bard の挙動もある程度は推測できるようになりました。

API のエラーでもどの単語が原因かまでは教えてくれませんが、大まかな理由が示されるだけでもかなり違います。

Bard は不特定多数に向けて安全側に倒す必要があるので、このような挙動は仕方ないということは理解できます。ですが能力を調べる上でハンディになります。

例えば以下の記事では共通テストで能力を調査していますが、Bard が回答を拒否することについて言及があります。

Google Bardは、概ね使用感は他のAIと変わりませんが、特定のワードや文章形式を入力すると「回答できません」という拒否反応を起こすことがありました。

翻訳できる言語を調べた記事です。

Bard でのエラーに経験的に対処しようとした記事です。API の挙動にも一定の共通点があるため、この考え方を応用しています。

Gemini 1.0 Pro でのブロックと設定

実例

設定

Bard

関連記事