動画生成AIに使えるツールについてまとめておく。
広告の製作、映画、ニュース、ミュージックビデオ、Youtubeのオープニング、プロモーションビデオ、SNS投稿
動画生成のコツ
それっぽい動画のワンシーンをつくるためには、まず画像。とにかくいい画像をつくることが必須。
Midjourney、StableDiffusion、ChatGPT、なんでもいいから、「いい画像」を出す。
じゃあいい画像ってなんだよ？ってことだけど、いい画像とはこれ。
- 破綻が無い
- 作ろうとしている動画に会った画風、スタイル
- 破綻が無い
これ。
これを満たしていることが大前提。そのためにプロンプトをがんばるわけだけど、正直いって、プロンプトは頑張る必要もあまりない。もちろん知っていた方が対応力があるのは間違いないのだけど、AIで画像を作るのに必要なのは、効率よりも試行回数。試行回数で殴る。これができない人はいいものは出せない。
サイバーパンクな世界のいい感じの画像がほしかったら、「cyberpunk, real」とかで数十枚出せば少しくらいいいものが出てくる。
それを選べばOK。
いい画像を選ぶコツは、何度も言うけど破綻が無いことが前提。よくあるのが手が崩れてるとか。Midjourneyは部分修正ができるので、どうしてもその画像が使いたければ部分修正をする。
それと、動画にするにあたって注意することはこれ。
- 人がいない、あるいは一人。
- これからの動作が想像できる画像であること
- なるべく解像度を上げる
なるべく、これらを満たすこと。
人が少ないのは、動画を生成するにあたって破綻を減らせる。人はどうしても崩れやすい。人が崩れやすいってメイドインアビスかよ（）
動作が想像できる画像であることというのは、動画生成の仕組みは、与えた画像が、生み出す動画の最初の１フレームに位置するものであるから。ここから動作が想像できないと、単純に動きの少ない動画になる。それを狙ってるなら良い。
解像度は、言うまでもなし。
あとはたくさん生成していいものを選ぶ。以上。
【画像生成AI】
- midjourney
- chatGPT
- adobe firefly
- スーパーロゴデザイナ「ロゴつくるくん」
- Adobe Express
- Leonardo.ai
- Pixelart sprites creator
- LensGo.AI
midjourney
言わずとしれた画像生成ツール。
もうこれでいいんじゃないかな
chatGPT
最近は画像も出せる。とりあえず日本語でいろいろ作れるから便利っちゃー便利
firefly
版権自由なので使い勝手がいいかもしれない。
使ってないけども。
スーパーロゴデザイナ「ロゴつくるくん」
ロゴをつくってくれる。
GPTs
Adobe Express
https://new.express.adobe.com/
アドビのAIツールまとめ。画像したり音声から動かしたり、テンプレ―トがあったりととにかく機能が多い。
adobe課金済みなら全部の機能使えるのもよい。機能が多すぎてまだ実験できていない。
Leonardo.ai
https://www.sedesign.co.jp/dxinsight/leonardo-ai
画像生成。無料で使える（毎日トークンあり）
商用利用可能だし、コントロールネットが使えたりなんかいろいろ便利。
https://app.leonardo.ai/
Pixcelart sprites creator
https://chat.openai.com/g/g-j2SiQ1crr-pixelart-sprites-creator
ピクセルアートをつくってくれるGPTs。神。
【動画生成AI】
- Pika
- Runway
- Fliki
- Vrew
- Pictory
- Heygen
- animateDiff
- domo ai
- Topaz
- Pixverse
- Kaiber
- seaart
- goenhance
Pika
作品系をつくるなら選択肢。使いやすいし今のところ無料。
Runway
作品系の定番。テキストからでもイメージからでも動画が作れる。
一定以上の時間は有料だが、クオリティは高い。
Gen-1という機能（https://research.runwayml.com/gen1）は動画をベースに内容を変換してくれる。例えば、本をビルに変えてほしいとか。ドローンでしかできなかったことをＡＩがやってくれる。
Fliki
ナレーション付き動画作成。説明系の動画は自動で字幕とかつけてくれるので便利、かも。
作品系には向いてない気がする。
有料。わりと高め。
Vrew
本の要約、都市伝説、偉人の名言、AIコンテンツなどをまとめて、字幕、ナレつきの動画が作成できる。Flikiより直観的かもしれない。あと無料。
Pictory
字幕系では一番クオリティが高いかも。ただ、読み上げ音声は日本語非対応。英語の場合はいい感じのクオリティ。
https://app.pictory.ai/textinput
HeyGen
アバターがしゃべっている動画を簡単に作成できる。有料だが、他にはない機能なので価値があるかも。
日本語も対応。偉人の名言や、いろいろな絵画、画家などにしゃべらせるだけでも面白いかもしれない。
https://app.heygen.com/home
AnimateDiff
https://sorenuts.jp/4592/
Stable Diffusion Web UI(Automatic1111)の拡張機能。
アニメーションを一貫性をもたせて生成できる。ただし、StableDiffusionのある程度熟練が必要。
イラストから動画生成。video to videoも可能。
Domo ai
参考 https://x.com/hirochuu8/status/1736209898739003836?s=20
discord discord.gg/TrZBzj4x
Topaz ai
https://www.topazlabs.com/
写真、動画のフレーム補完やスケールアップをしてくれる。買い切りアプリ。
まだ使ってないが、単純に動画の完成度をあげるアプリ。必須の可能性たかい。
Pixverse
https://ai-illust-kouryaku.com/?p=17979
https://app.pixverse.ai/create/video
動画生成、画像生成ができる。クオリティはわりと高め。現在無料でつかえる。
プロンプト、ベースになる画像次第ではわりといい動画が作成できそう。
kaiber
https://kaiber.ai/
歌詞と音楽から動画を作成してくれるAIツール。
なんかSNSとかに使える気がする。未検証。
Image to Video、text toもあるが、目玉機能は音楽から生成。
ただし課金機能。曲をつくってこれにかければMVがつくれる、と考えると楽だけど同じようなものになりやすそうは気はする。要検証。
seaart
https://www.seaart.ai/ja
Deepフェイクが無料でできるサイト。
動画と顔写真をアップすればDeepフェイクが作れる。
AIフェイススワップという機能。基本無料で毎日トークンが発行される。
LensGo.AI
https://twitter.com/lensgo_ai
https://lensgo.ai/
スタイルトランスファーAI。
動画を別のスタイル（アニメとか絵画風とかいろいろ）に変換するAI。
DOMOと同じ系統。
ただ、スタイルの種類が多く、人物だけかえたり、プロンプト制御ができたりする。
クオリティは、まあAIだな！っていう感じ。
goenhance
https://www.goenhance.ai/
domoと同じように、動画から動画を生成するAI
domoより精度というか、完成度が高い（らしい）
参考資料
https://chousensiyou.com/what-is-heygen/
【音声合成AI】
- Murf
Murf
テキストを音声にしてくれるAI。日本語対応。ほぼこれ一択かもしれない。基本有料だけど無料でもいじれる。
https://murf.ai/
【画像レタッチ】
- MagnificAI
Magnific AI
https://weel.co.jp/media/magnific-ai/
あらゆる画像レタッチができるAI。
食べ物を美味しそうにしたり、解像度をあげたりクリアにできたりする。
Midjourneyで出した画像の解像度をあげたり、完成度をあげたりとかに使えそう。有料。
https://magnific.ai/
【音楽生成AI】
- suno.ai
- SOUNDRAW
suno.ai
歌詞つきの音楽が生成できる。クオリティは据え置きだが、いろいろなジャンルで出してくれるので単純に面白い。
何に使うかと言われると・・・いろんな古い曲のリミックスとか、偉人に歌詞をつくってもらって曲にしたり？
完成度の高いものを選んで、動画にするとか。でも歌手がいないので同じ方向性の曲は作れない。使い道に悩む。
https://www.suno.ai/
SOUNDRAW
それっぽい音楽を生成するAI。歌とかは無し。
https://soundraw.io/ja/
【３Dモデル生成AI】
- Common Sense Machine
- Tripo AI
- objtoschematic
Common Sense Machine
https://3d.csm.ai/
一枚絵を３DモデルにしてくれるAI。精度は・・・よくもわるくもという感じ。
Tripo AI
https://www.tripo3d.ai/
テキストから３Dモデルを生成。なんかのっぺりしてる。
objtoschematic
3Dモデルをボクセル化する
https://objtoschematic.com/
参考動画
https://twitter.com/AIsonesone/status/1738598170979176899
https://x.com/iamneubert/status/1730625951271358611?s=20
AIで生成した画像の販売
- PIXTA
- adobe stock
AIの案件
画像生成系
https://www.youtube.com/watch?v=NvKxBahVG14
クラウドワークス、ランサーズ、ココナラ。
とりあえず大量に案件応募する。