AI・Shiori 「SD-CN-Animation」で動画をつくったらきれいにできた

今日は、SD-CN-Animationという新しい拡張機能を使って2種類の動画を作ってみます。

一つは、昨日のmov2movと同じ「Video2Video」という方法で、ベースとなる動画を用意して、その動きからフレームごとに静止画を切り取り、それをControlNetで１枚ずつ生成して動画にするというものです。
昨日の反省も踏まえて、今日は背景は真っ白で、洋服もシンプルにし、アクセサリーも一切ついていない映像を選びました。
結果を見ると一目瞭然ですが、とてもきれいにできました！

そしてもうひとつはTxt2Videoで、これは本当に驚きですね。テキストしか入れていないのに簡単に動画がつくれてしまいました。
解像度やピントの問題はありますが、これはプロンプトの工夫でどうにかなるかもしれません。

下記の動画は、わずか１秒ちょっとのものなので、スピードを0.5倍速にしてGIFにしました。顔の表情の変化も出ていてとても良い動画ですね。

こちらは途中から服が変わってすっかり変身してしまいました。
変身による表情の変化も楽しいです。

こちらは途中から背景もすっかり変わりましたが、けしてぐちゃぐちゃにならずに連続性を維持しているところがすごいと思います。

最後にカーテンのようなものを閉めて隠れてしまうところが可愛いですね。

なにしろ、事前に動画を探さなくてよいというのがすごく手軽でいいですね。
詳細は下記に紹介されていますが、後日、時間があるときに、使い方等を解説させていただきます。

SD-CN-Animation is now available as Automatic1111/Webui extension. Generate coherent video2video and text2video animations easily at high resolution and unlimited length.

txt2videoは、プロンプトを研究して、次回、もっと精度を上げた動画をアップできるよう研究してみます。