【最新AIアニメーション情報まとめ】 12/10〜12/18｜DomoAI、DreaMoving、Pika、Leonardo.Aiなど
毎日AI情報を追うのが難しい方へ。
10分で先週のAIアニメーション情報を振り返られる、まとめポストです！
まるっと振り返っていきましょう！
▼1. 簡単に試着を可能にするAI / Outfit Anyone
【アニメにも対応できる着せ替え生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 13, 2023
「Outfit Anyone」は人間の写真と、服の切り抜き写真があれば写真のポージングに合わせて仮想試着が簡単に。服が正面からの写真しか無くても、試着時に補正してくれます。AnimateAnyoneと同じくアリババから発表!
続く>>#生成AI #AI #ファッション pic.twitter.com/n2T342Na9a
名称：Outfit Anyone
プロジェクト：https://humanaigc.github.io/outfit-anyone/
以下から簡易版の試着が試せます。
▼2. 顔写真・プロンプト・ポーズだけで動画制作 / DreaMoving
【モナリザがダンスを披露？】
— 木内翔大＠SHIFT AI代表「日本をAI先進国に」𝕏 (@shota7180) December 16, 2023
元画像に忠実ではないところが面白い...
指定した人物の顔特徴を維持し、狙い通りのダンス動画を生成する「DreaMoving」
・一部参照画像（顔写真）
・プロンプト
・ポーズデータ
だけで、静止画の人物を動かせる。
AI Tiktokerが流行りそうですね
続く>> pic.twitter.com/29ub49sWUJ
【速報！新たなダンス生成AI登場】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 11, 2023
Animate Anyone や Magic Animateとは異なる、ダンス生成AI「DreaMoving」がアリババが発表！
全身の画像は必要無く、顔のリファレンス画像とプロンプト+ポーズデータで構築するそうです。
続く>>#生成AI #AI動画 #DreaMovingpic.twitter.com/dmM1DMDTTy
【続報! #DreaMoving 】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 11, 2023
プロンプトや顔写真だけでも踊れるDreaMovingのプロジェクトページが更新。様々な動画パターンが掲載されました！
動画はリファレンスイメージで顔+Pose+プロンプトでダンスを生成されたもの。
Codeの公開予定のリポジトリのリンクも公開されています。
続く>>#生成AI pic.twitter.com/fK0Li4yrke
名称：DreaMoving
プロジェクト：https://github.com/dreamoving/dreamoving-project
▼3. 落書き絵をリアルタイムでリアルに変換する / Leonardo.Ai
らくがきがリアルな絵に変わる「https://t.co/ir9zJsTfeo Realtime Canvas」
— ひろちゅ～｜AI副業 (@hirochuu8) December 12, 2023
1: ざっくり形を描く
2: AI画像生成される
3: 生成結果を元に描き足す
の繰り返しで完成度をあげていってる。
AIによってお絵かきの常識がかわっていきます🎨 pic.twitter.com/fxWs0Xf1Ov
名称：Leonardo.Ai
サイト：https://leonardo.ai/
▼4. 簡単に動画変換ができる / Domo AI
Domo AIでアニメ変換やってみた！
— ひろちゅ～｜AI副業 (@hirochuu8) December 17, 2023
このレベルの動画変換が「無料&3分」でできるのやばすぎる🔥 https://t.co/cvg8EUYiEB pic.twitter.com/xPJeDGdrUY
名称：DomoAI
サイト：https://domoai.app/
動画変換の「DomoAI」のヤバイ活用法が生まれてる！
— ひろちゅ～｜AI副業 (@hirochuu8) December 18, 2023
１：画像生成：Stable Diffusion
２：３Dモデル化：Stable zero 123
３：アニメーション：mixamo
４：テイスト変換：DomoAI
で、思い描いたアイデアを具現化。
AIが人間の創造性を解き放っていく🙌pic.twitter.com/POPBjneN6G
DomoAIに課金して色々触ってましたが、
— YOHEI@生成系AI×化学 (@programmingtry) December 18, 2023
Refer to my prompt moreを選択すれば、対象物を自分の好きなイメージに変更できますね。
髪の毛の色や服装などの変更は、プロンプト次第かもしれません。 https://t.co/zMcNF4NLmP pic.twitter.com/kkkOibUi2f
▼5. らくがきから3Dモデルを生成できる / CSM
らくがきから３Dモデルを生成できるようになった！
— ひろちゅ～｜AI副業 (@hirochuu8) December 15, 2023
3D生成AI「CSM」のアップデート。
AIは人間のアイディア・イメージの具現化をより強力に助けてくれるようになる。
「自分は何を創りたいのか？」を深掘りするのが、より重要になっていくと思います🧠 pic.twitter.com/NFMbzfHP2r
サービス名：CSM
サイト：https://3d.csm.ai/
▼6. 画像１枚からアニメーションを生成できる / Magic Animate
vid2denseposeが使えるようになれば
— アリス(AI is in wonderland) (@AIiswonder) December 10, 2023
vid2densepose→magic animate
画像を選べば結構よいものができると思います
（vid2denseposeはVRAM6GBでも動きました）
しかもドラッグアンドドロップとクリックだけで簡単！
（立ち上げるのが少しめんどくさいが） pic.twitter.com/UE5h3vO4M1
Magic Animateの使い方はひろちゅ〜さんが分かりやすく解説してくださっています！👇
【Magic Animateの試し方】
— ひろちゅ～｜AI副業 (@hirochuu8) December 5, 2023
画像１枚からAI動画を生成できる「Magic Animate」は、Googleアカウントさえあれば試すことができます！
たった４ステップで完了🔽
１：まず、Google Colabのリンクにアクセスhttps://t.co/mv6dqqSDlO
２：GPUを設定し、再生ボタンを押す… pic.twitter.com/60apJ4fWGq
▼7. 高クオリティな動画生成ができる / Pika
【日常の映像から映画を創る】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 18, 2023
Pika（ @pika_labs ）で実験されているvideo-to-video。現段階で言えば、かなり大雑把なものではあるものの、現実世界の映像は誰でも撮影できるもの。
AIの表現がさらに進化すれば、行動力やアイデアの時代になる。#生成AI #AI動画pic.twitter.com/c7f1dNaKRF
名称：Pika
サイト：https://pika.art/login
▼8. スケッチから3Dワールドを生成 / BlockadeLabs
【3Dワールド生成AI × Blenderのワークフロー】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 11, 2023
スケッチから自由に3Dワールドが生成できる @BlockadeLabs でワールドを生成し、Blenderに組み込むデモ。
ただのスカイボックスではなくて3Dってこと...?
今週後半さらに発表があるみたい。#3D #生成AI #skyboxpic.twitter.com/DnLRqsfNE6
名称：BlockadeLabs
サイト：https://www.blockadelabs.com/
下記はBlockadeLabsとCSMを利用したAIゲーム制作です。
【生成AIで3Dゲーム作成！】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 12, 2023
スケッチから自由に3Dワールドが生成できる @BlockadeLabs でゲームがリリースされています。キャラは @CSM_ai にて生成！
クリエイターは @ailovedirector 素晴らしい試み！#生成AI #AI #3DCGpic.twitter.com/mxegKkRLkk
▼9. 動画の一貫性を向上させる / Freelnit
【どんな動画生成AIの一貫性も向上させる】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 13, 2023
FreeInitはAI動画の一貫性を劇的に向上させる技術。今まで、ガイド無しでは安定しなかったAI動画の安定性を飛躍的に高めてくれるフレームワークです。
AnimateDiffなどにも対応！すごい進化!!
続く>>#生成AI #AI #AI動画pic.twitter.com/T5CBY88DGk
名称：Freelnit
プロジェクト：https://tianxingwu.github.io/pages/FreeInit/
コード：https://github.com/TianxingWu/FreeInit
▼10. AnimateDiffでさらに一貫性の高いアニメ生成 / Adapter LoRA
【AnimateDiffさらに一貫性が進化】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 15, 2023
v3_sd15_mmとAdapter LoRAを組み合わせて一貫性の高いアニメを制作可能との情報が！適度に動きながら一貫性が大きく向上しているのが分かる。
現実的なワークフローで大きなクオリティアップが見込める。
続く>>#生成AI #AI動画pic.twitter.com/CK4aibboXF
概要：AnimateFiff用の新しいLoRAモデル「Adapter LoRA」
ダウンロード：https://huggingface.co/guoyww/animatediff/tree/main
▼11. 顔のモーションキャプチャAI / Reshot AI
【正確なAI顔キャプチャ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 17, 2023
顔の3Dモーションキャプチャ Reshot AI（ @reshotAI ）を利用した、芸術作品のモーションキャプチャ連動動画。
細かい表情も再現。ここまで動くとVtuberはちょっと合わないけど、よりアバター文化は成熟してくる可能性。#AI #アバターpic.twitter.com/GtCc3GGR8G
名称：Reshot AI
サイト：https://www.reshot.ai/3d-gaussian-splatting
GitHub：https://github.com/ReshotAI
▼12. CMの制作 / Midjourney・Runway Gen-2・After Effect
たった１人で作ったクリスマスムービー🎅
— ひろちゅ～｜AI副業 (@hirochuu8) December 12, 2023
画像：Midjourney
動画化：Runway Gen-2
編集：After Effect
を駆使して、CMのような出来になってる✨pic.twitter.com/1HLwSILhJo
Midjourney：画像生成
Runway Gen-2：動画生成
After Effect：動画編集
▼13. 動画を高画質化してくれる / Upscale-A-Video
AI動画アップスケーラー「Upscale-A-Video」が登場！
— ひろちゅ～｜AI副業 (@hirochuu8) December 13, 2023
動画の特徴をしっかり保ったまま、鮮明で高品質に変換している。
・昔の映像を鮮明にする
・低解像度でサクッと動画生成→高品質化
・クライアントの宣材を高クオリティ化
といった活用が考えられます👍pic.twitter.com/PlRAcwf5nd
名称：Upscale-A-Video
プロジェクト：https://shangchenzhou.com/projects/upscale-a-video/
GitHub：https://github.com/sczhou/Upscale-A-Video
▼14. 動画変換でAI着せ替え / Stable Warpfusion
「Stable Warpfusion」でAI着せ替え👚
— ひろちゅ～｜AI副業 (@hirochuu8) December 16, 2023
・動画編集で服だけ抜き出した動画を作成
・服だけWarpfusionで変換
・元の動画と合成
の手順で製作されています。
AIならではの新しい映像表現が生まれてきている✨pic.twitter.com/dQZfk7PmPb
名称：Stable Warpfusion
概要：元動画をベースにアニメーションを合成し変換できる
サイト：https://www.futuretools.io/tools/stable-warpfusion
▼15. 作詞、作曲、イメージ映像 / ChatGPT・Suno AI・Runway Gen-2
いやいや。AI怖い。
— KEITO💻AIディレクター (@keitowebai) December 13, 2023
・ChatGPT
・Runway Gen-2
・Suno ai
ChatGPTに「○○○のイメージの歌詞作って」
↓
Sunoに歌詞コピペ。イメージコピペ。
↓
歌詞の一行一行をコピペしてRunway Gen-2で動画化。
↓
PremierProで動画と音楽良い感じに合わせる。
ど素人の思考停止でこのクオリティ。 pic.twitter.com/DjN7XIdoob
chatGPT：対話形式でAIと会話ができるチャットサービス
Suno AI：テキストだけで曲、歌詞、歌声を作れる音楽生成AI
Runway Gen-2：テキストだけで動画生成ができるAI
▼16. テキスト入力だけでショート動画が作れるアプリ / Kn1ght
一瞬でショート動画が作れるアプリ「Kn1ght」使ってみた！
— ひろちゅ～｜AI副業 (@hirochuu8) December 13, 2023
１：アバターを選ぶ
２：テキスト入力
３：動画を出力
で完成！声やBGMも変えれます。
気軽にサクッとVtuber始めれる時代きてます👍 pic.twitter.com/3oWWa1OlYp
▼概要
・テキスト入力だけでショート動画が作成できる
・自分の声で喋れる
・自分の自分のLive2Dモデルをインポートできる
アプリダウンロード：https://apps.apple.com/jp/app/kn1ght-ai%E5%8B%95%E7%94%BB%E7%94%9F%E6%88%90/id6470290408
▼17. 生成AI動画に特化した動画配信プラットフォーム / AiTube
「AI-TUBE」
— ホーダチ | AI✖️Cloud✖️Dev | 外資×ひとり法人(Axcxept Founder) (@hokazuya) December 18, 2023
新たなエンタメプラットフォームの開幕を感じる。
AI専門の動画プラットフォームがすでに。
チャンネル、動画、Music。
新たな幕開けの予感。 pic.twitter.com/lDzC1D9giK
名称：AiTube
サイト：https://huggingface.co/spaces/jbilcke-hf/ai-tube
▼18. 生成AIで作られた『ベイブレード』最新作のMV
生成AIで作られた『ベイブレード』最新作のMV！
— ひろちゅ～｜AI副業 (@hirochuu8) December 17, 2023
3DCGをベースにしてAIで色をつけている形。
「AI×3DCG」は最強のクリエイティブスキルになる予感✨ pic.twitter.com/Jfa0cB4Kf5
フル動画：https://www.youtube.com/watch?v=qBkcPBXiuI8
以上、振り返りまとめでした。
AIに関する情報を配信しています☺️ ↓
X(twitter)ではリアルタイムでAIに関する情報を発信しています📝
良かったらフォローしていただけると嬉しいです！
https://twitter.com/kurayu_yuki
この記事が気に入ったらサポートをしてみませんか？