AIアバターのHeyGenの「Avatar in Motion 1.0」が凄い 他 / Catch up on AI 2024.3.28
Pick up
AIアバターのHeyGenが新機能、「Avatar in Motion 1.0」がリリース。アクションもリップシンクも全てが自然に。もうアバターと言われないとわからないレベルになってきた。
HeyGen
https://www.heygen.com/
【生成AIアバターの進化が凄い】@HeyGen_Official が、新機能「Avatar in Motion 1.0」をリリース。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
これがアバターだとは全く思えない。リップシンクはほぼ完璧なレベル。手などのジェスチャーもを音声に合わせて生成される。#生成AI #アバターpic.twitter.com/slVGGaoJck
Catch up on AI
Forge Webuiで複数人を生成 SD Forge Attention Couple
【Forge Webuiで複数人を生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
SD Forge Attention Coupleは、2人以上が混在する画像生成する際のプロンプトの課題を解決してくれる拡張機能のForge版。
1行づつプロンプトを分けること複数人の生成でもそれぞれ個性を出すことが可能です。
続く>>#画像生成AI #AI pic.twitter.com/XP2ahzmvDx
3DCG生成AIのワークフロー
【3DCG生成AIのワークフロー】@MeshyAI のPVで象徴的なうさぎのキャラクターの生成・調整方法が公開
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
1.Meshyで3Dモデルを生成
2.Mayaで微調整
3.Substance PainteでPBRマテリアルを作成
4.Blender でリグとスキンを設定#生成AI #3DCG #AIpic.twitter.com/VMaxV1h7SE
360度写真生成AI Skybox AIがアップデート
【360度写真生成AI】@BlockadeLabsが360度の世界を生成するSkybox AIの次のモデルに取り組んでいる。VRの世界でも生成AIが進化。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
以下はv3でのskyboxのアウトプット。十分なレベルに見えますが、まだ低解像度の初期のルックとのことです。#生成AI #skybox #VR https://t.co/D7iNMb9w9i
WEB/アプリ生成AI Creatie AI
【WEB/アプリ生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
Creatie AIはWEBサイトやアプリを数分でデザインしてくれる生成AI。
既存のデザインを自動的に分析し、デザイン要素 (フォント、色、影など) を特定して整理し生成なども可能とのことで。かなり効率化されそう。
WEB制作もいよいよ変わる...！
続く>>pic.twitter.com/pkdFXGuo0L
AdobeのAIに参照機能 Structure Reference
【AdobeのAIに参照機能】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
Structure Reference （構成参照）がリリース！Adobe Firefly にもリファレンス機能が付き、世界中で様々な作品が発表されています。
Adobeがリファレンス機能を実装することで、一般化し、生成AIの課題や状況も大きく変わってくる可能性。
続く>>pic.twitter.com/u6a9qTgz8I
歌もスピーチもいける！AniPortrait
【歌もスピーチもいける！】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
AniPortraitは、ポートレート画像と音声からアニメを生成するフレームワーク。先行研究と比べても、顔の自然さ、ポーズの多様性、品質に優位性がみられた。
気軽に利用できるようになれば、アバター文化はさらに加速しそう。
続く>>pic.twitter.com/07Vz4vojVn
光の表現が美しいKaiberのtransform がv3にアップデート
【光の表現が美しい】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 28, 2024
Kaiber（@KaiberAI）のtransform がv3にアップデート。スタイルの設定が見事に表現されている。高い一貫性もあり、v1とはまた違う魅力がある。
スタイル：(35mm film, film photo_1.3), analog film, film grain, film blur#動画生成AI #AIpic.twitter.com/cV3L7NywZ9
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？