![見出し画像](https://assets.st-note.com/production/uploads/images/144055838/rectangle_large_type_2_fda188877b09881b26389fd93affcd46.png?width=1200)
動画生成AIを試してみたpart2(LumaAI・DreamMachine編)
突然、すごい動画生成AIが登場しました!
まさか続くとは思わなかった動画生成AIの記事、part2の開幕です!
前回の記事はこちら、同じプロンプトで比較してみます。
Dream Machine
LumaAIが突如発表した動画生成AIです。LumaAIは元々3Dスキャンを売りにしていたアプリでした。3Dスキャンをする際に現実世界の動画を入力します。その高品質な現実世界の動画を学習データに用いて、この項クオリティな動画生成AIを生み出したのでしょうか!?
記事執筆現在は誰でも無料で使うことが出来ます!
始め方
Googleアカウントがあればだれでも簡単に使用することが出来ます!
① LumaAIのDreamMachineのページにアクセス
こちらからLumaAIのホームページアクセスしましょう
②【初回】"Sign in with Google"をクリック
下のような画面が表示されたら中央の"Sign in with Google"を押しましょう!
![](https://assets.st-note.com/img/1718371618770-98VTHkI6BU.png?width=1200)
③【初回】自分のGoogleアカウントを選択
アカウントの選択画面が出てくるので、自分のGoogleアカウントを選択しましょう。ログイン確認画面も「はい」を押下しましょう。(必要に応じて利用規約の確認をお願いします)
![](https://assets.st-note.com/img/1718371808258-yg487AkYAM.png?width=1200)
④ログイン完了
下記の画面になればログイン完了です!
![](https://assets.st-note.com/img/1718371858055-Pya3Cy0aPZ.png?width=1200)
【2回目以降】右上のTry Nowをクリック
2回目以降、URLをクリックして下のような画面が表示されたら右上の"Try Now"を押しましょう!
![](https://assets.st-note.com/img/1718371565479-20eBhe5Gg6.png?width=1200)
使い方
使い方は直感的でとても簡単です。文章から動画を作成するパターンと、画像と文章から動画を作成するパターンがあるので見ていきましょう
①文章から動画を作成したいとき
好きな文章を入れて、矢印ボタンを押せばそれだけでOKです!
![](https://assets.st-note.com/img/1718372150415-0Xan2e8w8v.png?width=1200)
日本語でも大丈夫です!
![](https://assets.st-note.com/img/1718372319209-n71VLm6t1l.png?width=1200)
ちなみに文章から動画を作成することを"Text to video"と言ったりします。
②画像と文章から動画を作成したいとき
画像マークを押すとフォルダが開かれるので、画像を選択しましょう。
![](https://assets.st-note.com/img/1718372437025-wkbts7eZKD.png?width=1200)
自分が選んだ画像は、左上に表示されます。そのうえで、自分の好きな文章を入力して①と同様に実行します
![](https://assets.st-note.com/img/1718372484483-SWZtCpU3NN.png?width=1200)
【実行できているかどうかの確認】
下の様に矢印がくるくる回っていれば、無事に命令が通っているので、あとは待ちましょう!
![](https://assets.st-note.com/img/1718372546051-Q9OKG8FDC1.png)
リリース当日は混雑のため最低でも2分待ってくれと言われています。
![](https://assets.st-note.com/img/1718372644932-evOVYK0S8q.png?width=1200)
ちなみに下のような文章だと、エラーになってしまいました。
![](https://assets.st-note.com/img/1718372689226-8OG3gO9U2g.png?width=1200)
ここまでで、Dream Machineをばっちし使えたと思います!
ここからはおまけで、OpenAIの「Sora」の動画をどこまで摸倣できるかにチャレンジしてみます。(ほかの動画生成AIの結果は前回記事をチェックしてみてください!)
DreamMachineを試してみる
Soraのおさらい
目指していたSoraの動画(下記HPより引用)https://t.co/ySABNNpMof pic.twitter.com/ATGoB8ZWZk
— れお太郎 (@reotaro24126) April 10, 2024
①短いプロンプト*で試してみる
*プロンプト=動画生成AIに入れる文章のこと
まずはSoraのプロンプトを摸倣しつつ、短いプロンプトを入力してみます。
prompt:A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage.
結果はこちらです。ほかの動画生成AIと比べてもはるかに段違いでほぼ実写動画ですね。なぜか後ろ歩きをしているようにも見えます。
ちょっと短いプロンプトの場合
— れお太郎 (@reotaro24126) June 14, 2024
A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. pic.twitter.com/87NFHL8H9f
②Soraと同じプロンプトで試してみる
次にSoraと同じプロンプトで試してみます。
A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. She wears a black leather jacket, a long red dress, and black boots, and carries a black purse. She wears sunglasses and red lipstick. She walks confidently and casually. The street is damp and reflective, creating a mirror effect of the colorful lights. Many pedestrians walk about.
結果はこちらです。水の反射まで表現していて、実写と見間違えるクオリティであり、Soraと比べても遜色ないです。
Soraと同じプロンプトで作成した動画
— れお太郎 (@reotaro24126) June 14, 2024
ここまで来たもう好みの問題ですね。#LumaDreamMachine #LumaAI pic.twitter.com/Hj7ZnRrnhF
③Soraの画像とプロンプトを入力する
Soraの画像のスクリーンショットとプロンプトを入力してみました。
スクリーンショットはこちら。ちゃんと歩いてくれるのか。。
![](https://assets.st-note.com/img/1718373793020-NInm6qttyZ.png?width=1200)
結果はこちらです。
Soraのスクショ+同じプロンプト
— れお太郎 (@reotaro24126) June 14, 2024
ほぼほぼ遜色なし! pic.twitter.com/xf26oaCScW
④他の動画生成AIとの比較
これまで登場していた動画生成AIと比較してみましょう!
・Open-sora
・Gen-2
に対して同じ短いプロンプト(①と同じ)を入れて試してみます!
ついに一線を画す動画生成AIが登場しました!
— れお太郎 (@reotaro24126) June 14, 2024
LumaAI Dream Fusion(1つ目)を過去に作成したOpen-Sora(2つ目)、Runway Gen2(3つ目)と同じプロンプトで比較してみました!
現状かなりクオリティの差がありますね。 pic.twitter.com/YxUPrHfuMD
現状、圧倒的にDreamMachineに軍配が上がりますね!
最後に
ついに実用に耐えうる動画生成AIが登場しました!
私も今後、自作動画を作る機会があるので、AIを使って動画製作をしてみようと思います!
他社の動画生成AIのリリースも楽しみですね。
良ければこの記事のスキを押していただいたりXをフォローいただけると励みになります!
この記事が参加している募集
この記事が気に入ったらサポートをしてみませんか?