見出し画像

"画像+モーション=話しているような動画"が作れる「LivePortrait」を試してみる

SUTO💡

LivePortraitとは

単一の画像 + モーション = リアルなビデオができちゃうものです。
69Mの高品質フレームでトレーニング済み、RTX 4090 で 12.8msという速さ、効率的で制御可能かつオープンソース。いいプロジェクトです！！


🌐プロジェクトページ類

早速試してみる

デモ画面

ソースの画像には日本人女性、モーションの元となる動画には白人女性を入れて試してみます。

それぞれの良さがある２人

出来上がった動画がこれです。

ふむふむ、このような感じになるのですね！
処理はだいぶ早かったです。口がうまく取れなかったけど、目線や顔の位置などはしっかり取得していました。

他にも試してみる

お次は動画を変えて猫にモーションをつけてみたいと思います。

猫を喋らせたい

動画はそのまま猫を男の子にしてみました。

うぬぬ、どうも口が開いてくれないですが、それ以外の感度はとても良い感じでした！

まとめ

今回試したわたしの動画ではうまく口あたりが取れなかったですが、DEMOや他の方が試した記録ではしっかり口元も取れてたりするので、ぜひみなさん試してみてください！
今日はここまで〜！


この記事が気に入ったらサポートをしてみませんか？