3Dガウシアンを舞台に「Gaussian Frosting」/ Catch up on AI 2024.3.24
Pick up
3Dガウシアンで表面に特別な層を追加し、3DCGと連携したり編集が可能になる技術。
Gaussian Frosting: Editable Complex Radiance Fields with Real-Time Rendering
Project：https://anttwo.github.io/frosting/
arXiv：https://arxiv.org/abs/2403.14554
Code：Coming Soon
Catch up on AI
バイクをAIアニメ変換
【バイクをAIアニメ変換】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024
照明の反射光がある成果、人の動きに合わせて、描画変わる。光の影響を強く受けている気がします。
夜のシーンのAIアニメ変換は意外と難しいかも。でもこういう表現として使うとか、カットの瞬間で使うのは有り！
Colabo：@KnKDesign#AIアニメ #生成AI pic.twitter.com/GrEfJuM2f8
AI時代のWEBコンテンツ「ワールドシミュレーター」
【AI時代のWEBコンテンツ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024
WEB上で動作するワールドシミュレーター。様々なコマンドが準備されています。
LLMが進んだ先に、様々な世界を作り出し操作できるようなものが出来あがるかもしれない。今の時代を汲んだWEBコンテンツ。
続く>>pic.twitter.com/mANwFL6MmJ
Viggleを利用したダンスビデオ
【Viggleを利用したダンスビデオ】@ViggleAIを利用して、Midjourneyでキャラを生成し、そのイメージとストックビデオのダンスを組み合わせて生成し最後に合成を行ったもの。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024
並べてみるとすごい精度！#AI #ダンスpic.twitter.com/2y8AjWlaE0
Midjourney Style Referenceの最適なパラメータを探る
【最適なパラメータを探る】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024
Midjourneyの新しい、Style Referenceのバージョン+強度別早見表。#AI #画像生成AI https://t.co/hgogfylIHW
人間から3Dモデル再構築 ScoreHMR
【人間から3Dモデル再構築】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024
ScoreHMRは拡散モデルを利用して、動画から人間の動きを3Dモデル化できるフレームワーク。
ブレイクダンスやパルクールといった複雑で素早い動きにも対応。さらに複数人にも！
続く>>#AIpic.twitter.com/uQNOwcQXVv
現実世界を一瞬でセグメント SceneScript
【現実世界を一瞬でセグメント】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024
SceneScriptは、現実世界をメタバースへ転換するための新技術。物理世界をスキャンし、セグメントしてタグ付けする。
将来は歩き回るだけ、現実世界を仮想世界に転換することができるかもしれない。
続く>>pic.twitter.com/9rtSJeXNYV
教育現場が変わる!?Gatekeep
【教育現場が変わる!?】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024
Gatekeepは自然言語から、数式やグラフなどのアニメーションが生成可能。
今まで画像生成AIとかPythonで頑張ろうとしていたが、突破口の一つになりそう！
続く>>pic.twitter.com/inpOW4agUj
動画を自在に操る AnyV2V
【動画を自在に操る】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024
AnyV2Vは、トレーニング無しで様々なvideo-to-videoを実現できるフレームワーク。
InstructPix2Pix、InstantID、AnyDoor、NST などと組み合わせ、スタイルの転送や人物の固定などにも対応可能。
続く>>pic.twitter.com/y2w3ulqvCC
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？