マガジンのカバー画像

AI 動画生成

9
運営しているクリエイター

#画像生成AI

長時間の一貫性のある動画を生成するための技術VideoDirectorGPT 他 / Catch up on AI 2023.9.27

長時間の一貫性のある動画を生成するための技術VideoDirectorGPT 他 / Catch up on AI 2023.9.27

Pick up基本生成AIによる動画生成は一貫性を保つために短い動画を生成することに特化している場合が多いですが、VideoDirectorGPTはLLMを利用することで、一貫性のある長時間動画を生成可能にする技術。

VideoDirectorGPT
https://videodirectorgpt.github.io

Catch up on AISDXLの背景置き換え生成AI「SDXL Ba

もっとみる
TDPTでポーズ取得してBlenderで調整してChatVRMで再生する

TDPTでポーズ取得してBlenderで調整してChatVRMで再生する

「TDPT」でポーズ取得して「Blender」で調整して「ChatVRM」で再生する手順をまとめました。

1. TDPT「TDPT」(Three D Pose Tracker) は、誰でも簡単にWebカメラ (またはiPhoneカメラ) のみでフルボディトラッキングできるツールです。今回はiOS版を使います。

ダウンロード無料、一部買い切り課金で利用できる「プレミアムメニュー」(600円) が

もっとみる
Google Colab で AnimateDiff を試す

Google Colab で AnimateDiff を試す

「Google Colab」で「AnimateDiff」を試したので、まとめました。diffusers版は動作が安定してなかったので、公式リポジトリ版を使用してます。

1. AnimateDiff「AnimateDiff」は、1枚の画像から一貫性のあるアニメーションを生成する機能です。diffusersにもAnimateDiffが追加されましたが、動作が怪しかったので、今回は公式リポジトリを利用

もっとみる
ComfyUI で Image-to-Video を試す

ComfyUI で Image-to-Video を試す

「ComfyUI」で Image-to-Video を試したので、まとめました。

前回
1. Image-to-Video「Image-to-Video」は、画像から動画を生成するタスクです。
現在、「Stable Video Diffusion」の2つのモデルが対応しています。

2. Colabでの実行Colabでの実行手順は、次のとおりです。

(1) セットアップ。
前回と同様です。

もっとみる
Google Colab で Moore-AnimateAnyone を試す

Google Colab で Moore-AnimateAnyone を試す

「Google Colab」で「Moore-AnimateAnyone」を試したので、まとめました。

1. Moore-AnimateAnyone「Moore-AnimateAnyone」は、「AnimateAnyone」の再現実装です。元の論文で実証された結果を一致させるために、さまざまなアプローチやトリックを採用していますが、それらは論文や別の実装とは多少異なる場合があります。

これは非常

もっとみる