見出し画像

動画生成AI" hailuoai "新サイトの使い方11/19版 ( プロンプトも )

割引あり

マニアックプロンプト12 個販売開始しました
🌟 hailuoai 使い方の記事は無料です

更新履歴 直近3世代
11/19 hailuoai プロンプトチュートリアル公開
11/12 生成方法の選択
11/8 hailuoai イベント情報追加


hailuoai が移転しました (9/15情報)

話題のAI動画生成サイトhailuoai が新サイトに移転しました。
新サイトの使い方と、プロンプトの基本を説明します。

移転後の解説を読むと、今後はあらゆる動画生成ツールが提供されるようです。

hailuoai の使い方

生成方法の選択 (11/12 追加)

2014/11/12 より、生成方法を選択するようになりました。

①プロンプトで動画を生成する場合は 「Text to Video」タブを選びます。

②写真から動画を生成する場合は 「Image to Video」タブを選びます。

①プロンプトを使って動画生成

サインイン後の使い方を説明します。

矢印の場所にプロンプトを入力します
プロンプト入力後 ★ をクリックします
生成がはじまり
進捗が表示されます

NGワードなどは生成完了時点で判断されます。

--プロンプト生成動画の仕様

縦横比 16:9 固定
解像度 1280 × 720
フレームレート 25 FPS
コーデック H264 MPEG-4 AVC (part10) (avc1)
拡張子 .mp4
尺 約5.6秒

プロンプト補正機能

この鉛筆マークは、プロンプト補正機能です。
「ON」にしておくと、プロンプトの意味をAIがくみ取り、自動的に適切な内容の動画にしてくれます。
「ON」推奨だそうです。

「OFF」にするとAI判断は入らず、プロンプトに忠実な動画を生成します。

hailuoai 生成動画で見比べてみてください。

プロンプトAI補正機能 OFF

プロンプトAI補正機能 ON

キューイング (10/11より)

動画生成の完成を待たずに、次の動画を生成にかけられます。
これまでは、動画生成が完了するまで、次の動画生成作業を行えませんでした。
無課金ユーザーは 3 キュー
サブスクリプション登録ユーザーは 5 キュー に加えて、
2キューの並列処理が行われます。

② I2V 写真から動画生成 (10/9 追加)

2024年10月8日から、I2V が可能になりました。
写真の取り込みはとても簡単です。
画面上に画像をドラッグ&ドロップ するだけです。

写真がアップされたら、Create ボタンを押します。
プロンプトの追加も可能です。

現在、Luma Dream Machine に実装されている「Extend ( 続きを生成する機能 )」は hailuoai に実装されていませんが、公式Discord内のアンケートでExtend機能が欲しいにチェックを入れたので(おそらく皆さん入れたと考えられます)、いずれ実装されるかも。

--I2V 履歴機能

左の画像アイコンをクリックすると、画面下部にこれまでアップロードした写真が表示されます。
再度使用したいときは、その画像をクリックします。

--I2V 注意点

💡回線の状況などで、写真のアップロードに失敗すると、写真のアイコン上にストップマークがつきます。
その場合は、写真アイコンをクリックしてください。再読み込みします。

💡ピンボケが激しい、など、被写体が読み取れない写真の場合はエラーが出て動画生成されません。

💡露出が多い画像は、エラーが出て動画生成されません。

この画像はエラーが出て I2V 出来ませんでした

I2V に成功した検証動画集です。

--I2V 生成動画の仕様

縦横比 写真の縦横比に準ずる
解像度 16:9 のとき 1280 × 720 内にほぼ収まる
( 2912×1632 をI2Vして 1296 × 720 になりました )
フレームレート 25 FPS
コーデック H264 MPEG-4 AVC (part10) (avc1)
拡張子 .mp4
尺 約5.6秒

各種警告画面

①NGワード判定 (9/30 時点で、③再編集に置きかわった可能性有り)

NGワードと言いますか、生成後の動画がポリシーに反していると判断されると生成結果が表示されません。暴力的や、性、差別などが含まれます。
どのような基準か不明なため、拒否されたらプロンプトを変えてリトライするしかありません。
制作側に、そんなつもりはなくても、なんらかのAI判断でNGになります。

ポリシー違反と判定されると、この様な画面になります

②リトライ画面 (9/26追加)

ポリシー違反に「リトライ」機能がつきました。
これは、生成してみたらポリシー違反の動画になった可能性が有るため、
生成を中止するというものです。
NGワードが含まれている訳では無いので、同じプロンプトでリトライできます。


リトライボタンを押せます

③再編集画面 (9/30追加)

プロンプトに問題が有り、リトライ不可能な場合、
プロンプトの再編集が可能になりました。
プロンプトを再編集するか、このまま削除するかの、
どちらかを選べます。

Re-edit ボタンを押せます

④保留判定 (10/15 時点で、⑤保留判定 「レビュー依頼」に置きかわった可能性有り)

もしかして、ポリシー違反?のようなグレーゾーンの動画が生成された場合は「レビュー」になります。レビューが済むまでは保留です。
スタッフがチェックして、問題なしなら表示されるシステム「らしい」です。
・・・スタッフが見ているのか、AIが再判定しているのか、そこのところは明確にわかっていません。

レビューは、このような画面になります
レビューが完了すると表示されます

レビューに要する時間は、長くて約1時間、早くて数分でした。

⑤保留判定 「レビュー依頼」

生成した動画がポリシーに違反していると判断されると、レビュー依頼画面が表示されます。
再編集するか、レビュー依頼するかを選択できます。
私の場合は、同じプロンプトを繰り返し生成して発生しました。
生成結果の動画が、どのように仕上がったのか見られていないので、どのような動画が生成されたかわかりません。

レビューは人間が行うそうでして、結果が出るまで最長24時間かかります。

レビューしてもらう自分の主張を選択します。
・無害なビデオです
・同じコンテンツを他のプラットフォームでも表示可能
(Luma なら生成するよ、みたいな意味かなと思います)
・その他

レビュー依頼して却下されるとこの画面になります。

プロンプトチュートリアル公開(11/19追加)

Hailuo AI Tutorial ページができました。

https://b6j6u5f4zf.feishu.cn/docx/T3iLdwLAToky3txGtVCcjMbZnQh

ドメインが変わっており、サインイン促してきますが、サインインせずに使えます。翻訳するのは手間です。
公式のTutorialなので、目を通してください。

プロンプトの書き方(初級編)

プロンプトの書式は公開されていません。
カメラワークなどの演出効果は自分で考える事になります。
hailuoai DISCORD  にて試行錯誤が繰り返されています。

まず、日本語でも、英語でも構いません。
日本語で説明します。

プロンプトの考え方

私は次の様なステップでプロンプトを考えて、並べています。

  1. 主役を決める(性別・年齢など)

  2. 主役のスタイル(服装など)を決める

  3. 何をしているか

  4. 場所

  5. カメラワーク

このように書いておくと、後々プロンプトを推敲する上でわかりやすくなります。

※これは、ルールではありませんので、自分なりのスタイルでプロンプトを書いてOKです。

プロンプトの書き方

プロンプト区切りの、ピリオド「.」やカンマ「,」は不要です。
改行を認識します。
ピリオド「.」やカンマ「,」が有っても、構いません。

段落を、わかりやすくするために、空白行を入れてもOKです。

実例 プロンプト

18歳の日本人女性
長髪 白いドレスを着ている
海辺でマイクを持って歌っている
視点はアップからロング

完成動画です

プロンプトの書き方(中級編)

絵文字が使える

「蟹」を英語で「crab」と書くより絵文字で「🦀」とした方が、カニらしい動画を作ってくれました。
絵文字が標準的に持っている意味をベースにしているようです。
全ての絵文字を認識するかは判りませんが、ぜひお試しください。

静止画と動画の違い

Midjourneyのような静止画像生成とは異なり、動画が作れます。
そのため、動きのプロンプトを考える必要があります。

動きの順番は、上から下へ解釈されます。
秒単位で指定可能説を散見しますが、約6秒しかないため偶然だと考えています。
秒数制御が成功して見えるのは、秒数指定のために上から下への順番をグループ化しているからだと考えられます。
動きを繋げるためには、グループ化する事が重要です。

たとえば、こちらの動画は約6秒の間に3回場面転換しています。

3回の場面転換のために、次の様にプロンプトを3つのグループで、3回順番に並べて使用しています。

Cut1: { Action( "" )
CameraWork( "" )
}
Cut2: { Action ( "" )
CameraWork ( "" )
}
Cut3: { Action ( "" )
CameraWork ( "" )
}

プロンプト実例

movieType : ( super photorealistic ) 
kitten : { (wearing a red scarf)
( classical guitar playing )
} 

kitten on the sofa 

toy are surrounding the cat
toy audience is jazz-dancing

Backlight coming in from the window creates lens flare
camera rotates slowly
camera rotates slowly
camera rotates slowly

逆光の演出と、
カメラ移動がポイントです。
カメラ移動が3回繰り返し書いてあるのは、
必ずこうしなさいと、伝えるためです。
「大切な事なので3度言う」です。
強調させる方法が見つかれば、お知らせします。

I2Vでも使えるプロンプト

私が考えたプロンプトをいくつか紹介します

--カメラワーク ( クローズアップ )

face close up eyes close up

--動物が入って来る

Rabbit comes in from the side and the girl is delighted

--タイトルを入れる

3D CG Title Over rap
text = "LOVE SONG"
Flying logo frame in
Cute rounded font

プロンプトの書き方(上級編 プログラム言語)

プログラム言語と言いましてもC言語が使えるとかではなく。
変数や{} や () などで構造化して記述できます。
🌟中級編に書いたようなプロンプトの事です。
公式Discordのメンバー専用グループ内では、プロンプトの解析が積極的に行われています。
上級者になると、論理記号とも組み合わせて、プログラム風にプロンプトを完成させています。
メンバー専用グループのためプログラムのようなプロンプトを紹介できないのですが、プログラムに自身のある方は、ぜひ、お試しください。

トラブルシューティング

2024/9/24時点 情報

hailuoai は現在発展中のため仕様変更が度々行われます。
不安定な部分も有ります。
私が体験したトラブルシューティングです。
トラブルがあれば、公式Discordへ行ってみましょう。
サポートからの案内は無いですが、みなさんが会話していますし、自分から話しかけても良いでしょう。
エラーになるときは、たいてい仕様変更している時でした。
サイトを止めずに新機能リリースしているようです。

サーバーエラー

エラーメッセージの種類はいろいろあります

たまに、サーバーエラーが表示されて生成が出来ません。
待つしかないです。

生成終わりでリトライになる

生成が96%くらいまで進んで、終わったかなと思うと、リトライしてとの表示が出ます。
リトライするとまた生成が始まりますが、これの繰り返しです。
これも待つしかないです。

サマリーからダウンロード出来ない

サマリーのダウンロードアイコンからダウンロード出来ない場合が有ります。
Chromeの場合は、動画を右クリックして「動画を新しいタブで開く」を使うと、ダウンロードフォルダへダウンロードされます。

有料サービススタートしました (10/11)

有料サービスの料金プランは公式アナウンスをご確認ください。

無料プランで生成できる動画数

1日 3動画まで生成できます。
30日 で 最大 90動画 生成できます。
( Luma Dream Machine は 30動画生成/月 )

これは、1日100のデイリーボーナスクレジットが与えられ、
1回の動画生成で 30 消費する仕様によるものです。

Daily Bonus Credits 100 について

1日間の考え方は、日本時間の朝9:00 間隔です。
1日に 100 Bonus Credits が付与されます。
未使用分は翌日の 朝8:59 で失効します。
1 動画生成あたり 30 Credits 消費されます。
動画生成に失敗した場合は消費されません。

無料プランを使用している場合は、3回の動画生成で 90 クレジット消費され 10 残ります。

有料プラン( Standard )を使用している場合は、10 を有料プランのクレジットと併用できます。
10 が優先して消費されて、有料プランのクレジットから 20 引かれます。

Daily Bonus Credits 100の残分のバグ修正されました(10/17)

Daily Bonus Credits は、100 です。
消費Creditsは30なので、最大90消費します。
すると、10 Credits 残ります。
Daily Bonus Credits  の 失効は日本時間の 朝 9:00 ですが、
発行が どうやら 朝 9:00 (図ケースA)ではなく、
重複時間(図ケースB)がありました。
そして、ケースC の現象が発生していました。
原因は、ボーナスクレジットの付与が日本時間の午前0時に行われ、
ボーナスクレジットの残高失効がUTC 0:00 (日本時間 午前9時)に行われたからです。(10/16時点)
Discord で報告したところ即日本件は修正されました。
10/17 時点で ケースA で動いています。

hailuoai商用利用について

有料プランを契約して、WaterMark の外れた動画は商用利用可能です。
公式サイトに明記してあります。

利用規約では商用利用不可になっていますが、" Last Modified: 09/16/2024 " になっており、有料サービス開始前のものでして、WaterMark 付き動画の事と考えて良いです。

イベント情報

11/8 Hailuo StarQuest – AI Talent Showdown!

hailuoai 公式Discordにて、イベントの告知がありました。
AI タレントをテーマにしたイベントです。
TOP10に入ると、無制限生成7日間の特典が得られます。
詳細は、Discordページを確認ください。

完成動画の紹介

プロンプトのみで制作

本編終了後にNG集があります。

I2Vで制作

元の画像はMidjourneyで作りました。
ハートのエフェクトとBGM にはCapCut を使用しています。

ちなみに、Midjourneyでラムちゃんっぽいキャラクターのモデリングはしています。

ラムちゃん

ビキニ姿がユーチューブキッズでOKなのか自信がなかったので、
あのちゃんを意識したキャラクターデザインにしました。

リンク

hailuoai 移転後の新サイト

hailuoai 新サイトはこちら↑です、まだOGP カードは作られていないようです。

hailuoai 動画性能の検証記事

hailuoai の秘めたる性能が分かります、いろいろな検証動画をアップしています。

hailuoai 関連記事が沢山

私が noteに連載している hailuoai 関連記事の目次はこちらにあります。
沢山ある他の記事を探すときに便利です。

マニアック プロンプト(12個)販売します

マニアック プロンプトについて

カンマをほとんど使わない、改行メインのプロンプトです。
「プロンプト実例」を参考にしてください。
詳細な解説はありません。
ヒントは沢山あります。
読み解いて応用できる方、興味・関心などがありましたら、ぜひ。
こちらの再生リスト内の動画のプロンプトを11個公開(順不同)しています。

購入しても確認出来ないこと

プロンプトの基本、基礎ではありません。
プロンプトどおりに動いているとは限りません。
カンマを使うプロンプトが良い場合は、こちらにはありません。
統一されたフォーマットではありません。
動画に対しての参考とお考えください。

ここから先は

5,168字 / 1画像

この記事が参加している募集

この記事が気に入ったらチップで応援してみませんか?