LoginSignup
2
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

@dadada_kigyo_taro(起業タロウ DADADA)

はじめてのComfyUI（ポンコツmacでやる）

Posted at

はじめに

  • 普段大学の研究室のGPUでComfyUIを使って、研究をしています。
  • でもComfyUIはポンコツmacbookでも動かすこと自体はできます。
  • 一緒にやっていこう！

ComfyUIとは？

  • ComfyUIは、動画生成AIのワークフローをノードベースで操作できるソフトウェア。
  • FLUXやWan22などの最新の生成技術を使える。
  • 課金サービスとちがって、自前でGPUを調達すれば、コストが気になりません。

image.png

ダウンロードの仕方

  • 公式サイトのDownloadをクリックします。
    https://www.comfy.org/
  • Mac OSでもダウンロードできます。ダウンロードしたインストーラーをクリックしてください。
  • 「サーバー起動中」の黒い画面がでますが、我慢して待ちましょう。ComfyUIでは、多少動きが遅くても我慢することを覚えましょう。この対策については、あとでかきます。

image.png

使い方（低画質の画像生成を試しに打つ）

  • 「テンプレートを参照」から「画像生成」を選びます。1番左の紫のビンのやつです。
  • すぐ「実行する」をクリックしてもいいですが、あまりにポンコツPCを使っている人に向けて、超高速設定を書きます。
  • 幅と高さを640と360にします。SDと呼ばれるサイズで、720pより小さいです。スペックに少し自信があるひとは、1280と720にしてください。
  • プロンプトも「cat」にします。下のプロンプト欄は、ネガティブプロンプトです。空欄でいいです。
  • 最後にKサンプラーです。ここは、ステップを12まで落とします。これで超低画質のテスト用のパラメータ設定はできました。
  • 環境によっては30秒以内に生成されるはずです。遅かったひとも大丈夫。もう1回「実行する」を押すと、10倍以上の速度で画像生成できるでしょう。

image.png

注意すべきところを3ポイントで

（１）なんで初めの1回目は遅いの？

  • 初回はモデルファイルを読み込むため、数10秒の時間はかかってしまうそうです。2回目以降は早くなります。
  • はじめからFLUXやwan22など話題になってるツールに取り組むと、初回生成の壁でつまづいてしまいます。
  • メモリ不足ですって言われます。そういう心を折られる瞬間をなくすことがComyUIでは重要なんです。
  • いわゆるVRAMの問題は、少しずつ慣れてきてから勉強していきましょう。タスクマネージャなどでメモリ使用状況などをモニタリングしたりします。

image.png

（２）解像度の設定について

  • 解像度は、SNSなどにアップする場合は、720pがよいと思います。ただモデル稼働チェックやプロンプト確認であれば、480pとか小さい幅と高さで大丈夫
  • AIの場合は、あとでアップスケールすることもできます。
  • 4Kなどにアップスケールしてみるとわかりますが、一部のノイズが黒くなって破壊されることがあります。超解像の研究はこういうのがないように工夫されてます。

image.png

（３）Kサンプラーってなに？

  • 拡散プロセスで、どのようなノイズを抽出するかを設定するものです。文系でも統計学をやっていたひとは土地勘があるかもですね。
  • 設定を細かくすると、結果が出るのが遅くなります。ステップ数は、施行回数ですから、特に計算速度に影響を与えます。テストでは12くらいでいいです。
  • その他は計算手法の違いとかがありますが、どの手法は使うかは、そのうちでいいです。

image.png

さらに発展的なComyUIの使い方へ

  • ざっくりとポンコツmacでやるComyUIをみてみました。
  • はじめての方がいきなりGPUを買ってきたり、Vast aiなどのリモートPCに課金するのはハードルが高いかもしれないと思い書きました。話題になっているFLUXやwan22を使うには、市販のNVIDIAではスペック不足な場合もあり、ハードウェアも含めた勝負になってきます。
  • FLUXなどの現状のSaaSサービス（特に中国製のSaaS？？）を普段課金して使っている方は、ComfyUIに少し触れてみることで、動画生成の世界が身近になるかもしれません。

参考にした記事

おわりに

この記事が役に立ったら、ぜひLIKEとストックをお願いします！
普段、動画生成AIの研究をしているので（一応研究者の方は実名なので、私の友人ということになっています）、その観点から、いろいろみんなに技術を使ってもらえる情報を提供できればなと思います。

XやYouTube、Discordもやっていますので、よろしければフォローをお願いします。

#ComyUI #flux #やってみた #動画生成 #初心者

2
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
Sign upLogin
2
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?