【生成AIニュース】『ControlNet++最新バージョン』『漫画生成AI「STORYSEED.AI」』他

まいどです。
本日の生成AIニュース。

■ControlNet++最新バージョン

ControlNet++ SDXL ProMaxバージョンがリリースされ、InpaintとTileが追加されました。
今後、SD3用のControlNet++モデルのリリースや、SD3用のControlNet++ ProMax モデルもリリース予定。

■STORYSEED.AI

漫画の1コマを入力すると、続きのコマを作り出す物語生成AIです。
マルチモーダル大規模言語モデルを活用して、長編の画像とテキストの物語を生成します。
ストーリーの開始部分となる画像とテキストを入力すると、物語テキストと文脈に沿った一貫したキャラクターやスタイルを持つ画像で生成する事が出来ます。

Storyseed - Story Seed AI

■3D Gaussian Ray Tracing

3Dガウス・スプラッティング上で複雑なシーンの再構築と再レンダリングで、光の反射などを計算に対応させる技術です。
架空のメッキ調の車に、見事に周りの景色が反射しています。

3DGRT

■RodinHD

写真から高精度な3Dモデルを生成可能なフレームワークです。
かなりの精度で、これまでは難しかったヘアスタイルなどもかなり忠実に生成できるようです。

RodinHD: High-Fidelity 3D Avatar Generation with Diffusion Models

https://arxiv.org/abs/2407.06938

RodinHD: High-Fidelity 3D Avatar Generation with Diffusion Models

■style-reference

画像スタイルをすばやく簡単に変更できるワークフローです。

style-reference/characters.md at master · roblaughter/style-reference · GitHub

では、本日は以上です。
それでは、また。