Supershipの名畑です。メダリストのアニメ版、原作を読んではいますが新鮮な気持ちで感動してしまいました。
はじめに
安全で透明性の高い日本語動画生成AI、AIdeaLab VideoJP (エーアイディアラボ ビデオ・ジェイピー) を商用利用可能で無償公開します。AIdeaLabVideo JPは学習に対する透明性が高く、著作権やライセンスに配慮して「フルスクラッチで」（０から）動画を学習していることが後の説明からもわかります。
参考：日本初の日本語対応の動画生成AI基盤モデル「AIdeaLab VideoJP」を商用利用可能で無償公開｜AIdeaLab
ということで、AIdeaLab VideoJPで動画を生成してみました。
あらかじめ用意されているサンプルプロンプトであればHugging Face Spaceで試せるため、今回はこちらを使わせていただきました。
モデルをダウンロードしてローカルでの動作も可能なようです。
特徴
- 学習に対して許諾が得られている動画を原則使用
- 日本語と英語の文章がそのまま通じるモデル
- モデルのライセンスは定番のApache-2.0
- 最先端の技術を利用し、ご家庭でも動く推論速度の早さを実現
No.1 花畑
プロンプト
チューリップや菜の花、色とりどりの花が果てしなく続く畑を埋め尽くし、まるでパッチワークのようにカラフルに彩る。朝の柔らかな光が花びらを透かし、淡いグラデーションが映える。風に揺れる花々をスローモーションで捉え、花びらが優雅に舞う姿を映画のような演出で撮影。背景には遠くに連なる山並みや青い空、浮かぶ白い雲が立体感を引き立てる。
生成結果
No.2 Waves crashing on the shore
プロンプト
The waves crash against the jagged rocks of the shoreline, sending spray high into the air.The rocks are a dark gray color, with sharp edges and deep crevices. The water is a clear blue-green, with white foam where the waves break against the rocks. The sky is a light gray, with a few white clouds dotting the horizon.
プロンプト日本語訳
波が鋭い岩だらけの海岸に打ち寄せ、飛沫を高く空中に舞い上げる。岩は暗い灰色をしており、鋭い縁や深い隙間が目立つ。水は透き通った青緑色で、波が岩に当たるところでは白い泡が広がっている。空は淡い灰色で、地平線にはいくつかの白い雲が点在している。
生成結果
No.3 波打ち際
プロンプト
遠くまで広がる青い海が、波打ち際で白く砕ける飛沫を上げる。視点はドローン撮影のように、上空から浜辺とサンゴ礁を一望する。柔らかな南国の陽光が海面に反射して宝石のように輝き、うっすらと海底のカラフルなサンゴが見える。
生成結果
No.4 Canyon river
プロンプト
A clear, turquoise river flows through a rocky canyon, cascading over a small waterfall and forming a pool of water at the bottom.The river is the main focus of the scene, with its clear water reflecting the surrounding trees and rocks. The canyon walls are steep and rocky, with some vegetation growing on them.
プロンプト日本語訳
澄んだターコイズブルーの川が岩だらけの峡谷を流れ、小さな滝を越えて下に水たまりを作っている。この風景の主役は川で、その透明な水面が周囲の木々や岩を映し出している。峡谷の壁は急峻で岩がちで、一部には植物が生い茂っている。
生成結果
No.5 木漏れ日
プロンプト
静かな森の中を、やわらかな朝陽が差し込む。木漏れ日に照らされた小川には小さな魚が泳ぎ、森の奥からは小鳥のさえずりが聞こえる。少し幻想的な雰囲気を持ちながらも穏やかな情景を映し出す動画。
生成結果
No.6 Snow mountains
プロンプト
The camera pans over a snow-covered mountain range, revealing a vast expanse of snow-capped peaks and valleys.The mountains are covered in a thick layer of snow, with some areas appearing almost white while others have a slightly darker, almost grayish hue. The peaks are jagged and irregular, with some rising sharply into the sky while others are more rounded. The valleys are deep and narrow, with steep slopes that are also covered in snow. The trees in the foreground are mostly bare, with only a few leaves remaining on their branches. The sky is overcast, with thick clouds obscuring the sun. The overall impression is one of peace and tranquility, with the snow-covered mountains standing as a testament to the power and beauty of nature.
プロンプト日本語訳
カメラが雪に覆われた山脈を横切り、広がる雪化粧の峰々と谷を映し出していく。山々は厚い雪に覆われ、一部は真っ白に輝き、他の部分はやや暗く灰色がかった色合いを帯びている。山頂は鋭く不規則で、空へ鋭角的にそびえ立つものもあれば、より丸みを帯びたものもある。谷は深く狭く、急な斜面もまた雪で覆われている。前景の木々はほとんどが裸で、枝にはわずかな葉が残っているだけだ。空は曇っており、厚い雲が太陽を隠している。全体的な印象は静けさと安らぎに満ちており、雪に覆われた山々は自然の力と美しさの証として堂々とそびえ立っている。
生成結果
最後に
動画生成では多くの物理法則を学ぶ必要があるため、たくさんの動画を学習に必要とします。例えば、エヌビディア社のCosmosでは2000万時間の動画を学習に使っていますが、このモデルで学習に使った動画は1200時間しかありません。このため、物理法則に従った動画が出にくかったり、そもそも物体の名前を知らなったりということもあります。
参考：日本初の日本語対応の動画生成AI基盤モデル「AIdeaLab VideoJP」を商用利用可能で無償公開｜AIdeaLab
上記通り、まだ動画の質は向上の余地が多くあると感じますが、高速で軽量です。
日本発の動画生成AI基盤モデル、応援しています。
宣伝
SupershipのQiita Organizationを合わせてご覧いただけますと嬉しいです。他のメンバーの記事も多数あります。
Supershipではプロダクト開発やサービス開発に関わる方を絶賛募集しております。
興味がある方はSupership株式会社 採用サイトよりご確認ください。