LoginSignup
8
5
新規開発や新技術の検証、導入にまつわる記事を投稿しよう!

落書きをStable Diffusionの画像に変換する新ツール「Stable Doodle」で意図した構図の高品質画像を次々と生成していった記録

Last updated at Posted at 2023-07-16

Supershipの名畑です。2023夏アニメが始まったわけですが「自動販売機に生まれ変わった俺は迷宮を彷徨う」が予想外のストーリー展開すぎた。

はじめに

Stable Diffusionの提供元stability.aiによる画像編集プラットフォーム「Clipdrop」が新しいツールをリリースしたので試してみました。

ツールの名前はStable Doodleで、doodle(落書き)を高品質な画像に変換するというものです。裏ではStable Diffusionが用いられているそうです。

いわゆるimg2imgなわけですが、かなり忠実に元の構図が守られるので、生成AIの世界において「こんな絵を描きたい」という人間の意図と実際のアウトプットとの距離がどんどんと近づいていると実感しました。素直に驚きました。

手順

  • Doodleを描く
  • Promptを書く
  • Styleを選ぶ
    • No style / Photographic / Fantasy Art / Origami / Isometric / Digital Art / Comic Book / Anime / Cinematic / Analog film / Neon Punk / Pixel Art / Low Poly / 3D Model / Line Art
  • Generateを押す

結果

ここからが結果です。
用意した元画像(落書き)と生成結果3枚を次々と貼っていきます。

期待を大きく上回る結果でした。

女性の横顔

元画像

image02a.png
  • プロンプト:Profile of a woman
  • Style:Anime

生成画像

元絵の構図をかなり忠実に再現してくれています。

image02b.jpeg image02c.jpeg image02d.jpeg

女性の横顔2

元画像

image01a.png
  • プロンプト:Profile of a woman
  • Style:Photographic

先ほどと同じ元画像に別スタイル(Photographic)を掛け合わせてみました。

生成画像

Photographic感は薄いと思いますが、高品質なイラストという印象です。

image01b.jpeg image01c.jpeg image01d.jpeg

革のジャケットを着たリーゼントで髭を生やした父

元画像

image06a.png
  • プロンプト:Regent's father wearing a leather jacket and growing beard
  • Style:3D Model

生成画像

英訳が雑だからかリーゼントが無視されている感はありますが、いい味が出ていますね。

image06b.jpeg image06c.jpeg image06d.jpeg

ツインテールの可愛い女の子

元画像

image03a.png
  • プロンプト:Cute girl with twin tails
  • Style:Anime

生成画像

元画像の輪郭の再現度が高いです。

image03b.jpeg image03c.jpeg image03d.jpeg

半魚女性

元画像

image07a.png
  • プロンプト:Half-fish woman
  • Style:Comic Book

生成画像

非現実な指定をしてみましたが、元絵を忠実に活かしながら世界観を表現してくれました。

image07b.jpeg image07c.jpeg image07d.jpeg

しいたけ

元画像

  • プロンプト:Shiitake mushroom
  • Style:Neon Punk
image04a.png

生成画像

ちゃんとしいたけだし、ちゃんとパンクしている。

image04b.jpeg image04c.jpeg image04d.jpeg

ペロペロキャンディ

元画像

image05a.png
  • プロンプト:Lingering candy
  • Style:Cinematic

生成画像

ペロペロキャンディが狙った位置に描かれています。謎の世界観が展開されていますね。

image05b.jpeg image05c.jpeg image05d.jpeg

最後に

高品質な絵が生成されることは予想していましたが、ここまで元画像の構図を再現してくれるとは思っていませんでした。
イラスト生成の活かしどころが強く広がったと感じます。

宣伝

SupershipのQiita Organizationを合わせてご覧いただけますと嬉しいです。他のメンバーの記事も多数あります。

Supershipではプロダクト開発やサービス開発に関わる方を絶賛募集しております。
興味がある方はSupership株式会社 採用サイトよりご確認ください。

8
5
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
8
5