transformersがDiffusionGemmaをサポートしたので、diffusiongemma-26B-A4B-itを動かしてみた。でも、まだバグが残っていて、device_map="auto"がエラーになってしまう。仕方ないので、Google ColaboratoryのCPU版で動かしてみた。
!pip install 'transformers>=5.12.1' accelerate jinja2
img="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/428317/55d10bae-10b0-4a18-8e27-0907bc16361f.jpeg"
from transformers import DiffusionGemmaForBlockDiffusion,AutoProcessor
mdl=DiffusionGemmaForBlockDiffusion.from_pretrained("google/diffusiongemma-26B-A4B-it")
prc=AutoProcessor.from_pretrained("google/diffusiongemma-26B-A4B-it")
msg=[{"role":"user","content":[{"type":"image","image":img},{"type":"text","text":"OCR Ainu sentences without translation."}]}]
inp=prc.apply_chat_template(msg,tokenize=True,add_generation_prompt=True,return_dict=True,return_tensors="pt").to(device=mdl.device,dtype=mdl.dtype)
out=mdl.generate(**inp,max_new_tokens=2048)
print(prc.batch_decode(out["sequences"],skip_special_tokens=True)[0])
『アイヌの美―彩りと輝き―』(京都文化博物館、2026年1月31日～3月19日)のウエランカラㇷ゚を読ませてみたところ、私(安岡孝一)の手元では以下の結果が出力された。
ウエランカラプ
令和7年度アイアイヌ工芸品展「アイヌの美－彩りと輝き」アニ アン レヘ チコレ ワ、ウサム
ペカ イコロ チアマ ワ エチヌカレアン。アイヌ アナクネ テテタワノ アン クルネワ 20 イネ パ エムコ パクノヤウモンモシ、
ヤンケモシ（カラブト）、ルトム オッタ オカイ。タネ ヤウモンモシ タ カイサモロモシ タ
カイ、モシリ エピッタ オカイ、テテタ アナクネ チクニ、ニカフ、キナカプ、チコイキ ポネ、
キラウ、シケチ、ルシ、チェプカプ、セイ アニ ウサ オカイ ペラ。ネナンベ オッタッタ ケット
アイナイウェネク プ カイ アン。イノミ オッタ アイナイウェネク プ カイ アン。ピシカン モシリ
エオオキ ウタッ トゥラ、アイヌ ウイム ワ、センカキ、ヌイト、カネ、コロ ワ ネナンベ
アニ ピリカ イカララ ピリカ ネイヨアイヌアイヌ。タパン イキ オッタ ホイロ ピリカ プ、ヌベキ ピリカ プ チヌムケ ワ チサンケ。イコロ
エチヌカレアン カトゥ エニナエニ。センカキ トッタ アンニウ アニウ ワ アンカラ イミカイ アン。
センカキ トッタ アンテセ ワ アンカラ チカラ カイ アン。ルトム オン ク イカララワ
カラ クッ カイ アン。ヤンケモシ グン コロ タマサイ カイ アン ワ、ポン コンコ コロ
タマサイ カイ アン。ウサ カネ ウサ ユキカラ ワ アン アンテムテ イコロ、イカヨピロ、
タンバクオブ、マキ カイ アン。イノミ オッタ アイナイウェネク プートゥキ、タカイイサワ、パッチ
カイ アン。ネナンベ トラノ クロスッタ シクヌ シクヌ チカフ美恵子（1948～2010）カラ プ カイ
エチヌカレアン。エパバキタ、澤謙（イヌエクル）、下倉洋之（カネユエクル）、藤戸康平
（イコロカラクル）タネ ウサ オカイ ピリカ プ カラ コアアスワ ウタン ネ ワ クスネナンベ
カイ チサンケ ワ エチヌカレアン。タプ アナクネ、アイヌブブリ ピラサ ク、公益財団法人アイヌ民族文化財団（アヌココロ
トミ アン アイヌブブリ ピラサ（ウタラ）ケシ パキネ ワ、タネ 30 スイ チキ シッタン
ナ。タンベ エチヌカラ ワ、テテタ アイヌブブリ、タネ アン アイヌブブリ、アムキリ クル インネ
チキ ピリカ。イオッタ イオン、タパン イキ チコ テ テテサワ、ピリカイコロ ウネルサ ワ ウタラ
ウサ ウサ ウンカシ ワ ウタラ、パセテラ チコイヤライケ シッタン ナ。北海道立釧芸術館
京都府
京都府文化博物館
公益財団法人アイヌ民族文化財団
小書きカタカナがほぼ全滅している。カタカナ書きのアイヌ語は、サポートされていないようだ。ただ、現時点では他にもバグが残っているので、もう少し待った方がいいのかな。