![見出し画像](https://assets.st-note.com/production/uploads/images/127442739/rectangle_large_type_2_80d083f9d60f16367de8b8ce1cd36d79.png?width=1200)
四角い箱から自由に3Dを生成 Text-to-3D with Blocks 他 / Catch up on AI 2024.1.12
Pick up
3Dの制作は慣れないととてもむずかしいものです。ただtext-to-3Dではある一定の品質の3DCGは創れたとしても思い描くものを創るのはかなり困難、そんな中発表されたText-to-3D with Blocks。
まだサービス化はされていないようですが、実装されたらとても便利そう!
【四角い箱から自由に3Dを生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
Text-to-3D with Blocksとして、3DCG生成モデル Rodin Gen-1と3Dの箱から3Dモデルを生成する手法が @DeemosTech によって公開。
箱を置いてプロンプトを設定し思い描く3DCGが創れる!3D苦手だけどこれならチャレンジできるかも!pic.twitter.com/i62KoFrpxl
Catch up on AI
矢印で生成AI動画を制御できるDragNUWAのComfyUI対応版が登場
【ComfyUI対応版が登場】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
矢印で生成AI動画を制御できるDragNUWAのComfyUI対応版が登場!
画像内の背景やオブジェクトを直接操作し、カメラの動きやオブジェクトの動きを制御しビデオを生成。
ComfyUIのワークフローなども公開されています。
続く>> pic.twitter.com/xAEcfcRbcb
様々な入力を正確に理解するモデル「LEGO」
【様々な入力を正確に理解するモデル】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
LEGOは、multimodal grounding modelと呼ばれ、画像、音声、ビデオなどの入力を理解し様々な領域で他と比べると良いパフォーマンスを上げています。
動画のタイムスタンプも理解しており、どの時点でそのシーンがあるか?なども提示することが可能。
続く>> pic.twitter.com/98c7HwWMgJ
映像を4K/8K/16Kまでアップスケール可能 Topaz Video AI 4 リリース
【映像を4K/8K/16Kまでアップスケール可能!】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
Topaz Video AI 4( @topazlabs )がリリースされ様々な機能が追加
・最大16Kのアップスケール
・映画レベルのノイズ除去
・フレーム補間
・手ブレ補正
・ローカルで動作
・処理時間を最適化
etcpic.twitter.com/hRZdxAfMGE
アニメ x 生成AI AIを利用したアニメスタジオの動画が公開
【アニメ x 生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
支援先のK&Kデザイン( @KnKDesign )さんが、CBCテレビで取材された際の映像がYouTubeに!
様々な前後の文脈がカットされている感はあるが、ワークフローで区切れば、確実に効率化には繋がる。超短期間でなんとか形した動画。世に出て良かった!!https://t.co/MzKKTyG7oM
東京の街をテーマにしたAIショート動画
【東京の街をテーマにしたAIショート動画】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 12, 2024
Lost in Translationは @jamesyeung18 によって制作された、東京の街を表現したAIショート動画。
撮影した写真をリファレンスとして、@midjourney v6で生成 → @runwayml で動画生成、@capcutappで仕上げというワークフロー。pic.twitter.com/ZyOTy8PiRy
Googleと大阪大学の研究「脳波から音楽を再構築」
【Googleと大阪大学の研究】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 11, 2024
脳波から音楽を再構築。音楽を聞いた時に活性化する部分の違いを利用して、AIを利用して聞いている音楽から、音楽を再構築するというもの。
画像やテキストの同様の再構築の実験は進んでいたが音楽も再構築可能になりそう。
続く>>#生成AIpic.twitter.com/xg6cVeXkbW
月とAIのアートワーク
【月とAIのアートワーク】@Magnific_AI を使用して月の写真を 8342x8352にアップスケールしながら月面都市を描く。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 11, 2024
AIでこれが個人ができる時代がやってきている。pic.twitter.com/EOwVvh4ugM
AIショートフィルムコンペティションGEN:48 第二回始まる!
【GEN:48 第二回始まる!】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) January 11, 2024
動画生成AIを提供するRunwayのショートフィルムコンペティションの第二回目がスタート。48時間以内に1〜4分の作品を完成させる。
開催は、2024年2月3日から5日でオンラインで開催。一般投票と審査員の評点で作品が選定される。
続く>>pic.twitter.com/qZLYGKHfO0
AIのNewsやアートワーク情報を更新中⚡
X(Twitter)ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか?