画像生成AIのReadout Guidance 他 / Catch up on AI 2023.12.6
生成した画像を様々な形で制御可能な生成AI「Readout Guidance」。様々な方法で生成した画像を制御可能な技術。
生成AIの画像調整が利便性が大きく向上しそうです。
Readout Guidance
Project：https://readout-guidance.github.io
arXiv：https://arxiv.org/abs/2312.02150
code：ComingSoon
【生成した画像を様々な方法で制御】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
「Readout Guidance」は生成した画像をドラッグでの編集などをはじめ、様々な制御が可能ですが、その中でも、Identity Consistencyが凄い！
指定した画像のキャラクター性を生成AI画像に反映することが可能。
続く>>#生成AI #AIpic.twitter.com/isaTg8XXkM
「Readout Guidance」
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
Project：https://t.co/fxXHnJtLgB
arXiv：https://t.co/CLULcSf5T6
code：ComingSoon
コード公開はこれからのようです。pic.twitter.com/J8CMlmJlwt
Catch up on AI
一枚の画像から再現性の高いアバターを生成「InvertAvatar」
【一枚の画像から再現性の高いアバターを生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
「InvertAvatar」は1枚の画像と映像があれば、精度の高いアバター生成が可能。
リアルタイムで実施できるなら日本ではVTuber文化も相まって様々なエンターテイメントが変わりそう。#生成AI #AI #アバターpic.twitter.com/FizyB4EJaA
SDXL Turboをベースの超速画像生成AI「StreamDiffusion」
【凄まじい速度でのAI画像生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
SDXL Turboをベースで開発されている「StreamDiffusion」この速度は凄い。
一貫性がどこかのタイミングで保たれれば完全にリアルタイムアニメーション生成も夢じゃない。
素晴らしい実験と試み。色々な分野で日々限界を突破していく。#生成AI #AI #SDXL Turbo https://t.co/nALhNmoFtS
Motionを利用し、生成AIの3DCGをガイドにアニメ制作
【生成AIの3DCGをガイドにアニメ制作】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
1.Motion（ @Mootion_AI ）で3DCGアニメ制作
2.Motionのstylized videoでアニメ化
3.Adobe Expressで背景を除去
4.背景を合成
とても良いワークフロー。背景が無いだけで完成度が上がる!pic.twitter.com/rW0kQmnXQo
ダンスポーズを動画から抽出できる「vid2densepose」
【映像からダンスポーズを抽出】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 6, 2023
話題になっているMagicAnimateで利用できるダンスポーズを動画から抽出できる「vid2densepose」
様々なダンスのベースになるガイドを作成できます。組み合わせて利用するとかなり幅が広がりそう。
続く>>https://t.co/6E9jSeLZPMpic.twitter.com/yYf9Fiz9uv
人物アバターに特化した生成AI HumanGaussian
【人物アバターに特化した生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 5, 2023
HumanGaussianは、人物のアバターに特化したtext-to-3Dの生成AI。テキストのみから高品質な3Dアバターを生成可能。
現実的なものだけではなくて、ドラキュラやエイリアンなども生成可能です。
続く>>#3DCG #生成AI #AIpic.twitter.com/ljXwOrVZje
AIにより自然言語による動画編集が可能に
【自然言語による動画編集が可能に】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 5, 2023
自然言語で動画編集ができるというツール「Clipla」。
LLMを活用して「3倍速にして白黒にして」などの指示で動画が編集され再構築される！
まだ開発者さん（ @mortenjust ）によるデモで詳細は非公開となっています。pic.twitter.com/Gu9sQLiNFw
Meta、IBMが共に50以上の組織と「The AI Alliance」という世界的なアライアンスを形成。
Meta（ @AIatMeta ）、IBM（ @IBM ）が共に50以上の組織と「The AI Alliance」という世界的なアライアンスを形成。その中には画像生成のStable Diffusionを手掛けるStability AI （ @StabilityAI_JP ）も参加。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 5, 2023
世界のAI推進の流れはさらに加速しそうです。#生成AI #AI https://t.co/vs3UFNUx2G
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？