生成AIの画像をレイヤー化「LayerDiffusion v1」リリース 他 / Catch up on AI 2024.3.2
Pick up
画像生成AIの一つの課題として、レイヤー構造が持てないということでした。これは制作に携わっている人間からすると、この課題は非常に重要ですが、遂にこの課題が解決。
LayerDiffusion v1はで基本的な画像生成とレイヤー機能のサポート。背景の画像生成を保ちレイヤー化はアップデート対応とのことです。
LayerDiffusion
code：https://github.com/layerdiffusion/sd-forge-layerdiffusion
model card：https://huggingface.co/LayerDiffusion/layerdiffusion-v1
【生成AIの画像をレイヤー化】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
LayerDiffusion v1がリリース。Forgeで基本的な画像生成とレイヤー機能のサポート。画像生成部分はまだ完成しておらず (作者の発言によると1週間以内とのこと)
ControlNet以来の大きな革命となるか？楽しみです！
続く>>pic.twitter.com/lVCvouxI9M
Catch up on AI
AIアニメ変換のポイント-顔については変換元の顔の面積によって大きく変わる
【AIアニメ変換のポイント】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
顔については変換元の顔の面積によって、大きく変わる。階段を登るために顔の精度が向上！
フレーム単位で書き出してimg2imgをかければ綺麗になりそうな気がしますが、現時点では顔の面積はある一定のライン以上としたほうが良い。
Colabo：@KnKDesign#AIアニメ pic.twitter.com/aBU4nOk8kO
さらに高精度に高密度に！GaussianPro
【さらに高精度に高密度に！】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
GaussianProは、3D ガウス スプラッティング (3DGS) をさらに高密度化ささえるための新しい方法。
パッと見ただけでは、違いがあまりわからないですが、Rendered Normalで見ると違いがわかります。
続く>>#AI #3DGS pic.twitter.com/X7sWkrn8gq
完全なオープンソースの大規模モデル OlMo
【完全なオープンソースの大規模モデル】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
OlMoは事前トレーニングデータ (3兆トークンのDolmaデータセット) を100%公開。
トレーニング コード、モデルの重み、推論コード、トレーニング メトリクス、完全なログを含むすべての生データも提供された100%のオープンソースモデル#LLM #AI pic.twitter.com/ypRLtNfytg
布の動きが素晴らしい生成AIアニメ
【布の動きが素晴らしい生成AIアニメ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
Goddess of Fabricと名付けられた生成AIで制作されたアニメーションが美しい。
流体はある程度AIでコントロールし易いのはナレッジとしてありますが、布の動きもかなり良い。肌や顔の一貫性は保ちながら布の部分だけ見事に表現。pic.twitter.com/MOUix2Jlra
AIアニメ変換の「高速移動」と「オクルージョン」精度テスト
【AIアニメ変換の精度テスト】@GoEnhanceを利用した AI変換を「高速移動」と「オブジェクト オクルージョン」の効果をテストデモ。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 2, 2024
高速移動、オクルージョンともに問題なさそう。アクションとの連携、エフェクトかけながら実施すればかなり面白いものを創れそう。#AIアニメ #生成AI https://t.co/NLSskvLJc2
巨大なバスターソードを操るクラウドを生成AIで
【FFのクラウドを生成AIで】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 1, 2024
巨大なバスターソードを操るクラウドを生成AIアニメ変換+エフェクトで再現。剣の裁きは人間の努力の賜物。
生成AIの裏で、こういった人間の多大な労力が垣間見えるAIプロジェクト凄く良い！#FF7 #動画生成AI #AIアニメ https://t.co/krxSzqnRtH
DomoAIもモデルがアップデート
【DomoAIがアップデート】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 1, 2024
既存のアニメ変換モデルがアップデート。
- Japanese Anime 2.1
- Paper Art 2.0
- Pixel Art 2.0
- Flat Color Anime 2.0
- Chinese Ink Painting Style 2.0
- Detailed Anime Style 2.0
顔の細部が大幅に良くなった！！#AIアニメ #生成AIpic.twitter.com/r0NZqtgzX1
ヒューマノイドロボの速度の世界記録が更新
【ヒューマノイドロボの速度が更新】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 1, 2024
Unitree H1 ヒューマノイドロボットEvolution V3.0が、世界記録更新。関節などの動きは限定的だが、3.3m/sの速度が出て、人間の動きと遜色ない動きが可能。
学習コストがどこまでかかるかは不明だが、素晴らしい動き。#AI #ロボットpic.twitter.com/3fc9RbqLs5
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？