![見出し画像](https://assets.st-note.com/production/uploads/images/129117155/rectangle_large_type_2_f536e1527702a7174ce6b9e57d7fcb83.png?width=1200)
AIアニメの作りかた ComfyUI
AIアニメの作り方を説明していきます。
ざっくりな説明は上の動画を見ていただければわかるんですが、
少し細かい説明がこの記事になります。
![](https://assets.st-note.com/production/uploads/images/129117264/picture_pc_7336f1a1814066d15f69899624658880.gif)
これはワンダープロジェクトJ2というゲームの二次創作アニメですが、30年近く前の作品です。
今回の流れは
・AIの一枚立ち絵を用意する
・AnimateAnyone-Evolvedで骨に沿って動かす
・AAEでつくった画像をControlnetをかけつつAIブラッシュアップ
・AfterEffectsで背景抜き
・AI背景一枚絵を用意する
・Runwayで動かす(ComfyUIでもできるが質がいいし時短になる)
・キャラの後ろに配置、キャラの画像を複製して影にして足元に配置
・完成
です。
作業はComfyUIで行います。
・AIの一枚立ち絵を用意する
![](https://assets.st-note.com/img/1706485842839-ojVEcKefyG.jpg)
・AnimateAnyone-Evolvedで骨に沿って動かす
骨を抜いたのはこちらのフリー動画
https://www.pexels.com/ja-jp/video/3888264/
骨は適当にDWOpenposeのノード作って処理します。
骨はComfyUI-AnimateAnyone-Evolvedの動作指示に使います。
https://github.com/MrForExample/ComfyUI-AnimateAnyone-Evolved
これをComfyUIカスタムノードに追加します。
readme下段のInstall項目熟読しないと動きません。(特にモデルの配置とか)
ノード自体は公式のサンプルワークフローでOK。
一度に入力するフレーム数が50を超えるとRTX3090でもVRAMいっぱいいっぱいになります。一度に処理するフレームは40くらいでキューを分割して入れる方が良いです。
出来上がった動画がこちら
![](https://assets.st-note.com/production/uploads/images/129117924/picture_pc_387a7a726197ba0f2ff02d6300088f64.gif)
・AAEでつくった画像をControlnetをかけつつAIブラッシュアップ
LATENTで AA-Eの動画を入力、ControlNetで骨を入力して薄くかけて補助します。
![](https://assets.st-note.com/production/uploads/images/129118231/picture_pc_43b10669b7919f163845ed563555681e.gif)
だいぶ形になりました。
・AfterEffectsで背景抜き
ロトブラシツールで綺麗に抜きます。
最初に用意する1枚絵の段階でグリーンバックにしてたらカラーキーで抜けてたかもしれません。やらかしです。
・AI背景一枚絵を用意する
![](https://assets.st-note.com/img/1706486702192-ZQOeLGBXRL.png?width=1200)
・Runwayで動かす
![](https://assets.st-note.com/production/uploads/images/129119012/picture_pc_918cf87b61ad772dcbfff99a50f4d022.gif)
Gen-2のMotionBrushで雲・海・草をそれぞれ別ブラシで塗って動きの調整を行います。
多分ComfyUI上でもできるんですがノード組むよりサービスを使ったほうが早いので今回はこちらで。
・キャラの後ろに背景配置、キャラの画像を複製して影にして足元に配置
![](https://assets.st-note.com/production/uploads/images/129117264/picture_pc_7336f1a1814066d15f69899624658880.gif)
と言う具合に、時間はほどほどでAIアニメが出来上がります。
GreenScreenにするLoRAも出てるので使ったほうが絶対時短になります。
toyxyzさんは神です。
終わりです。特別なことはしなくても、3090があったら出来ます。
この記事が気に入ったらサポートをしてみませんか?