概要

公式ページ。

これは、Stable diffusionで作成する画像を、ドット絵にしてくれるプラグイン。これを使って、ドラクエやFFみたいなドット絵素材が作れたらいいなと個人的に思い、作成してみる。

実行環境

M1MacbookPro
StablediffusionのVersion：AUTOMATIC1111

実装方法

上記公式ページを見ると、利用するには以下の3つのモデルが必要らしく、インストールを行う。
アクセスすると、GoogleDriveが開くので、そこからダウンロードする。

WebUIを起動し、管理画面を立ち上げる。
Extensionの欄から、Pixelizationを選択し、Installを押す。

インストールしたら、チェックを入れて有効化する。

ダウンロードした3つのファイルを、stable-diffusion-webui\extensions\stable-diffusion-webui-pixelization\checkpointsの配下に移動させる。

一応、WebUIを再起動させる。

実際に試す

まずは適当なプロンプトで、画像を出力させる。
今回作成したのはこんな感じ。

これを、Send to Extrasに送る。

その後、Enable pixelization（ピクセル化有効）とKeep resolution（解像度維持）にチェックを入れて、Pixel sizeを8(適当な数字)にし、生成（Generate）を押す。

押しても。。

押しても、RuntimeError: Attempting to deserialize object on a CUDA device but torch.cuda.is_available() is False. If you are running on a CPU-only machine, please use torch.load with map_location=torch.device('cpu') to map your storages to the CPU. Time taken: 2.40sと出力されるだけで、うまくいかなかった。
CPUしかない環境下で使用すると出力されるエラーらしい。