3Dガウシアンを舞台に「Gaussian Frosting」/ Catch up on AI 2024.3.24

Pick up

3Dガウシアンで表面に特別な層を追加し、3DCGと連携したり編集が可能になる技術。

Gaussian Frosting: Editable Complex Radiance Fields with Real-Time Rendering
Project：https://anttwo.github.io/frosting/
arXiv：https://arxiv.org/abs/2403.14554
Code：Coming Soon

Catch up on AI

バイクをAIアニメ変換

【バイクをAIアニメ変換】
照明の反射光がある成果、人の動きに合わせて、描画変わる。光の影響を強く受けている気がします。

夜のシーンのAIアニメ変換は意外と難しいかも。でもこういう表現として使うとか、カットの瞬間で使うのは有り！

Colabo：@KnKDesign#AIアニメ #生成AI pic.twitter.com/GrEfJuM2f8

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024

AI時代のWEBコンテンツ「ワールドシミュレーター」

【AI時代のWEBコンテンツ】
WEB上で動作するワールドシミュレーター。様々なコマンドが準備されています。

LLMが進んだ先に、様々な世界を作り出し操作できるようなものが出来あがるかもしれない。今の時代を汲んだWEBコンテンツ。

続く>>pic.twitter.com/mANwFL6MmJ

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024

Viggleを利用したダンスビデオ

【Viggleを利用したダンスビデオ】@ViggleAIを利用して、Midjourneyでキャラを生成し、そのイメージとストックビデオのダンスを組み合わせて生成し最後に合成を行ったもの。

並べてみるとすごい精度！#AI #ダンスpic.twitter.com/2y8AjWlaE0

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024

Midjourney Style Referenceの最適なパラメータを探る

【最適なパラメータを探る】
Midjourneyの新しい、Style Referenceのバージョン+強度別早見表。#AI #画像生成AI https://t.co/hgogfylIHW

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024

人間から3Dモデル再構築 ScoreHMR

【人間から3Dモデル再構築】
ScoreHMRは拡散モデルを利用して、動画から人間の動きを3Dモデル化できるフレームワーク。

ブレイクダンスやパルクールといった複雑で素早い動きにも対応。さらに複数人にも！

続く>>#AIpic.twitter.com/uQNOwcQXVv

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 24, 2024

現実世界を一瞬でセグメント SceneScript

【現実世界を一瞬でセグメント】
SceneScriptは、現実世界をメタバースへ転換するための新技術。物理世界をスキャンし、セグメントしてタグ付けする。

将来は歩き回るだけ、現実世界を仮想世界に転換することができるかもしれない。

続く>>pic.twitter.com/9rtSJeXNYV

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024

教育現場が変わる!?Gatekeep

【教育現場が変わる!?】
Gatekeepは自然言語から、数式やグラフなどのアニメーションが生成可能。

今まで画像生成AIとかPythonで頑張ろうとしていたが、突破口の一つになりそう！

続く>>pic.twitter.com/inpOW4agUj

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024

動画を自在に操る AnyV2V

【動画を自在に操る】
AnyV2Vは、トレーニング無しで様々なvideo-to-videoを実現できるフレームワーク。

InstructPix2Pix、InstantID、AnyDoor、NST などと組み合わせ、スタイルの転送や人物の固定などにも対応可能。

続く>>pic.twitter.com/y2w3ulqvCC

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) March 23, 2024

AIのNewsやアートワーク情報を更新中⚡

Catch up on AI｜Yoshihiro Tanaka | taziku｜note

X（Twitter）ではAIの最新情報を発信中🐦

Tweets by taziku_co