Supershipの名畑です。令和版うる星やつらが終了を迎えしみじみとしていたところ、飛び込んできた完全新作的アニメらんま1/2のニュース。贅沢な時代でございます。

はじめに

今年の2月に「AI動画生成で話題のGen-2を使って静止画上の人物を指定方向へと歩かせてみたりした」という記事を書きました。

そのRunwayが新たにGen-3 Alphaをリリースしたので使ってみたというのが今回の記事です。

「Gen-3 Alpha」は、RunwayMLが開発した一連のAIモデルの最新版で、テキストから動画、画像から動画、テキストから画像の生成に対応している。従来のGen-1、Gen-2と比較して大幅な性能向上を実現しており、旧バージョン以上の高品質な生成が可能になっている。

参考：Runway AI、高品質な動画生成AI「Gen-3 Alpha」を一般公開 - 窓の杜

また、6月に書いた記事「話題の動画生成AIサービス「Dream Machine」を使って女性の画像を動かしてみたら自然すぎて恐くなりもした」の際にDream Machineで生成した動画との比較も行います。

Runway

Runwayという社名と同名のプラットフォームがあり、そこでは生成AIを活用したツールが多数提供されています。Gen-3-Alphaはそのうちの一つです。

iOSアプリでも利用可能なようですが、今回はブラウザ版で進めます。

注意

本記事におけるアニメーションgifは容量の都合で解像度とフレーム数を変換していますので、実際の動画はもっと高画質です。

アカウント作成

Sign upのページからアカウントを作成します。

E-mailアドレスを用いての登録のほかにGoogleアカウント、Appleアカウントも利用できます。
EnterpriseプランではSSOも対応しているそうです。

料金

Runwayには無料プランであるFreeもあるのですが、現時点ではGen-3-Alphaは有料プランでしか使えないため、今回は$15/月のStandardで行います。

プラン毎の詳しい違いはpricingをご覧ください。
年払いであれば割引があります。

動画の生成

Gen-3 Alpha Prompting Guideによると、以下の構造でプロンプトを書くことで一貫した結果を得やすくなるようです。

[camera movement]: [establishing scene]. [additional details].

例として下記が示されていました。

Low angle static shot: The camera is angled up at a woman wearing all orange as she stands in a tropical rainforest with colorful flora. The dramatic sky is overcast and gray.

訳すと以下です。

ローアングルの静止画: カメラはカラフルな植物の茂る熱帯雨林の中に立つすべてオレンジ色の服を着た女性に向けて角度がつけられています。ドラマチックな空は曇って灰色です。

例示のプロンプトを用いて生成した動画が以下です。

プロンプトをかなり正確に反映した、高品質な動画ですね。
これは素晴らしい。

Dream Machineとの比較

では、次に、Dream Machineとの比較を同一プロンプトで行ってみます。

かなりシンプルなプロンプトでの比較であり、実使用上はもっと細かいプロンプトを書くと思うので、参考程度にしかならないかとは考えています。

Japanese office worker having a meeting at a coffee shop

Japanese office worker having a meeting at a coffee shop

訳すと「喫茶店で打ち合わせをしている日本の会社員男性」です。

Dream Machineの生成動画

Gen-3 Alphaの生成動画

印象としては

動画の見栄えの良さとしてはGen-3 Alpha
しかし動画の違和感(人種や腕など)が目立つのもGen-3 Alpha

といったところでしょうか。

A young Japanese female office worker is walking on the streets of Tokyo

A young Japanese female office worker is walking on the streets of Tokyo

訳すと「若い日本人の女性会社員が東京の道を歩いている」です。

Dream Machineの生成動画

Gen-3 Alphaの生成動画

もはや好みの問題かもしれませんが、Gen-3 Alphaで生成した動画の方が、人の目を引く要素は強いように思います。色彩的なものか、動き的なものか。

最後に

AIによる動画生成も実用性が増していっていると感じます。

Soraを使えるようになるのはいつだろう。

宣伝

SupershipのQiita Organizationを合わせてご覧いただけますと嬉しいです。他のメンバーの記事も多数あります。

Supershipではプロダクト開発やサービス開発に関わる方を絶賛募集しております。
興味がある方はSupership株式会社採用サイトよりご確認ください。